lazi mi pelno botow po stronie. nie mam nic przeciwko yahoo,cuil czy
google, ale coraz wiecej jest z bialorusi, czech czy rosji (yandex.ru)
tak sie zastanawiam czy sa one na stronie potrzebne? w koncu co mi po
zsindexowaniu w jakiejs ruskiej wyszukiwarce?
co o tym sadzicie czy nie lepiej dac na boty disallow z wylaczeniem tych
kilku najwiekszych i najpoipularniejszych?
z drugiej strony czy boty z rosji,czech czy bialorusi beda sie stosowaly
do ustawien w robot.txt? :)