Plik robots.txt dla SMF Jaki

[Link]

Plik robots.txt dla SMF jaki powinien być. Ostatnio widzę że indeksują mi się strony takie jak post orz w tym samym poście odpowiedzi msg

Czy robot zablokuje to w takiej konfiguracji

User-agent: *
Disallow: /http://www.mojadomenapl/index.php?topic=*.msg*

Nie wiem jak te same linki do jednego postu tematu zablokować z tym końcowym msg

tomeh

Full Member

Posty 222

 

[Link]

Plik robots.txt dla SMF jaki powinien być. Ostatnio widzę że indeksują mi się strony takie jak post orz w tym samym poście odpowiedzi msg

Czy robot zablokuje to w takiej konfiguracji

User-agent: *
Disallow: /http://www.mojadomenapl/index.php?topic=*.msg*

Nie wiem jak te same linki do jednego postu tematu zablokować z tym końcowym msg

[Link]

Bez linka tylko samo msg, oczywiście plik robots.txt musi znajdować się w gł. domenie. np masz forum w katalogu "forum" to plik robots ma być tu: -> h ttp://nazwa_domeny.com/robots.txt, a nie tu: -> h ttp://nazwa_domeny.com/forum/robots.txt bo równie dobrze mogłoby go nie być..

Spróbuj tak:

GeSHi -› Code: [select]

User-agent: Googlebot
Disallow: /.msg*

// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.008s | speed:4.43 KB/s

Lub dla wszystkich botów nie tylko dla googla:

GeSHi -› Code: [select]

User-agent: *
Disallow: /.msg*

// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.005s | speed:5.93 KB/s

Wtedy nie ważne, ile bedziesz miał for i katalogów z nimi, roboty nie będą brały pod uwagę linków z .msg...blabla pod uwagę

Jeśli nie pójdzie (sprawdź w narzedziach webmastera w google) to daj tak:

GeSHi -› Code: [select]

User-agent: Googlebot
Disallow: /*.msg*

// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.006s | speed:6.75 KB/s

Tak chyba to najlepszy sposób.

Czyli przykład jesli miałbyś forum w katalogu "forum" w domenie tomeh.pl czyli tomeh.pl/forum

GeSHi -› Code: [select]

User-agent: Googlebot
Disallow: /forum/*.msg*

// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.004s | speed:12.25 KB/s

Ale znajdź to co było o robots tu na forum jak również poszukaj na smf.pl tam kiedyś był topic o sitemap napisanej przez Kemac'a, czy może topic hmm chyba "lepsza indexacja.." czy jakoś tak..

Poczytaj też w necie o tym pliku, poszukaj w google znajdziesz zadowalające opdpowiedzi.
Zajrzyj np. tu: http://leksykot.top.hell.pl/tech/robots_txt#c2 i w takie właśnie miejsca..

Niestety brakuje mi czasu, bo może powstały by tu jakieś tutki..

Pozdrawiam
roco

roco

Administrator

3wProducer

Imagination is more Important than Knowledge

Posty 679

 

[Link]

Bez linka tylko samo msg, oczywiście plik robots.txt musi znajdować się w gł. domenie. np masz forum w katalogu "forum" to plik robots ma być tu: -> h ttp://nazwa_domeny.com/robots.txt, a nie tu: -> h ttp://nazwa_domeny.com/forum/robots.txt bo równie dobrze mogłoby go nie być..

Spróbuj tak:

GeSHi -› Code: [select]

User-agent: Googlebot
Disallow: /.msg*

// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.008s | speed:4.43 KB/s

Lub dla wszystkich botów nie tylko dla googla:

GeSHi -› Code: [select]

User-agent: *
Disallow: /.msg*

// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.005s | speed:5.93 KB/s

Wtedy nie ważne, ile bedziesz miał for i katalogów z nimi, roboty nie będą brały pod uwagę linków z .msg...blabla pod uwagę

Jeśli nie pójdzie (sprawdź w narzedziach webmastera w google) to daj tak:

GeSHi -› Code: [select]

User-agent: Googlebot
Disallow: /*.msg*

// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.006s | speed:6.75 KB/s

Tak chyba to najlepszy sposób.

Czyli przykład jesli miałbyś forum w katalogu "forum" w domenie tomeh.pl czyli tomeh.pl/forum

GeSHi -› Code: [select]

User-agent: Googlebot
Disallow: /forum/*.msg*

// Created by GeSHi 1.0.8.10 | code: -› [code=Apache configuration] | load:0.004s | speed:12.25 KB/s

Ale znajdź to co było o robots tu na forum jak również poszukaj na smf.pl tam kiedyś był topic o sitemap napisanej przez Kemac'a, czy może topic hmm chyba "lepsza indexacja.." czy jakoś tak..

Poczytaj też w necie o tym pliku, poszukaj w google znajdziesz zadowalające opdpowiedzi.
Zajrzyj np. tu: http://leksykot.top.hell.pl/tech/robots_txt#c2 i w takie właśnie miejsca..

Niestety brakuje mi czasu, bo może powstały by tu jakieś tutki..

Pozdrawiam
roco

[Link]

Zrobiłem to tak   Disallow: /index.php?*.msg*  - też działa  - ten wcześniejszy przykład jakoś nie chce działać u mnie jak sprawdzam plik robots w gooogle panelu. Dzięki.


Edit:

Skrupiałem to jeszcze bardziej Disallow: /*.msg*     - znaczek każdy * musi być przed aby blokowało każda możliwą ścieżkę do linku. Na próbach i błędach . Z 1700 wpisów na forum mam site 7900 - dlatego tak coś staram się tam zablokować.

tomeh

Full Member

Posty 222

 

[Link]

Zrobiłem to tak   Disallow: /index.php?*.msg*  - też działa  - ten wcześniejszy przykład jakoś nie chce działać u mnie jak sprawdzam plik robots w gooogle panelu. Dzięki.


Edit:

Skrupiałem to jeszcze bardziej Disallow: /*.msg*     - znaczek każdy * musi być przed aby blokowało każda możliwą ścieżkę do linku. Na próbach i błędach . Z 1700 wpisów na forum mam site 7900 - dlatego tak coś staram się tam zablokować.

[Plik robots.txt dla SMF Jaki]

Code: [select]  -› [ Topic: Plik robots.txt dla SMF Jaki ]

[Plik robots.txt dla SMF Jaki]

Code: [select]  -› [ Topic: Plik robots.txt dla SMF Jaki ]