Bez linka tylko samo msg, oczywiście plik robots.txt musi znajdować się w gł. domenie. np masz forum w katalogu "forum" to plik robots ma być tu: -> h ttp://nazwa_domeny.com/robots.txt, a nie tu: -> h ttp://nazwa_domeny.com/forum/robots.txt bo równie dobrze mogłoby go nie być..
Spróbuj tak:
User-agent: Googlebot
Disallow: /.msg*
// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.004s | speed:9.75 KB/s
Lub dla wszystkich botów nie tylko dla googla:
User-agent: *
Disallow: /.msg*
// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.003s | speed:8.43 KB/s
Wtedy nie ważne, ile bedziesz miał for i katalogów z nimi, roboty nie będą brały pod uwagę linków z .msg...blabla pod uwagę
Jeśli nie pójdzie (sprawdź w narzedziach webmastera w google) to daj tak:
User-agent: Googlebot
Disallow: /*.msg*
// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.003s | speed:11.01 KB/s
Tak chyba to najlepszy sposób.
Czyli przykład jesli miałbyś forum w katalogu "forum" w domenie tomeh.pl czyli tomeh.pl/forum
User-agent: Googlebot
Disallow: /forum/*.msg*
// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.004s | speed:11.79 KB/s
Ale znajdź to co było o robots tu na forum jak również poszukaj na smf.pl tam kiedyś był topic o sitemap napisanej przez Kemac'a, czy może topic hmm chyba "lepsza indexacja.." czy jakoś tak..
Poczytaj też w necie o tym pliku, poszukaj w google znajdziesz zadowalające opdpowiedzi.
Zajrzyj np. tu:
http://leksykot.top.hell.pl/tech/robots_txt#c2 i w takie właśnie miejsca..
Niestety brakuje mi czasu, bo może powstały by tu jakieś tutki..
Pozdrawiam
roco