|
Tytuł: Plik robots.txt dla SMF Jaki Wiadomość wysłana przez: tomeh 29.11.2009 16:31:51 Plik robots.txt dla SMF jaki powinien być. Ostatnio widzę że indeksują mi się strony takie jak post orz w tym samym poście odpowiedzi msg
Czy robot zablokuje to w takiej konfiguracji User-agent: * Disallow: /http://www.mojadomenapl/index.php?topic=*.msg* Nie wiem jak te same linki do jednego postu tematu zablokować z tym końcowym msg Tytuł: Odp: Plik robots.txt dla SMF Jaki Wiadomość wysłana przez: roco 09.12.2009 13:18:53 Bez linka tylko samo msg, oczywiście plik robots.txt musi znajdować się w gł. domenie. np masz forum w katalogu "forum" to plik robots ma być tu: -> h ttp://nazwa_domeny.com/robots.txt, a nie tu: -> h ttp://nazwa_domeny.com/forum/robots.txt bo równie dobrze mogłoby go nie być..
Spróbuj tak: GeSHi -› Code: [select] User-agent: Googlebot Disallow: /.msg* Lub dla wszystkich botów nie tylko dla googla: GeSHi -› Code: [select] User-agent: * Disallow: /.msg* Wtedy nie ważne, ile bedziesz miał for i katalogów z nimi, roboty nie będą brały pod uwagę linków z .msg...blabla pod uwagę Jeśli nie pójdzie (sprawdź w narzedziach webmastera w google) to daj tak: GeSHi -› Code: [select] User-agent: Googlebot Disallow: /*.msg* Tak chyba to najlepszy sposób. Czyli przykład jesli miałbyś forum w katalogu "forum" w domenie tomeh.pl czyli tomeh.pl/forum GeSHi -› Code: [select] User-agent: Googlebot Disallow: /forum/*.msg* Ale znajdź to co było o robots tu na forum jak również poszukaj na smf.pl tam kiedyś był topic o sitemap napisanej przez Kemac'a, czy może topic hmm chyba "lepsza indexacja.." czy jakoś tak.. Poczytaj też w necie o tym pliku, poszukaj w google znajdziesz zadowalające opdpowiedzi. Zajrzyj np. tu: http://leksykot.top.hell.pl/tech/robots_txt#c2 (http://leksykot.top.hell.pl/tech/robots_txt#c2) i w takie właśnie miejsca.. Niestety brakuje mi czasu, bo może powstały by tu jakieś tutki.. Pozdrawiam :) roco Tytuł: Odp: Plik robots.txt dla SMF Jaki Wiadomość wysłana przez: tomeh 10.12.2009 12:35:21 Zrobiłem to tak Disallow: /index.php?*.msg* - też działa - ten wcześniejszy przykład jakoś nie chce działać u mnie jak sprawdzam plik robots w gooogle panelu. Dzięki.
Edit: Skrupiałem to jeszcze bardziej Disallow: /*.msg* - znaczek każdy * musi być przed aby blokowało każda możliwą ścieżkę do linku. Na próbach i błędach . Z 1700 wpisów na forum mam site 7900 - dlatego tak coś staram się tam zablokować. |