| |||||||||
| |||||||||
05.10.2012 15:04
а проблемы с квотами могут быть из-за захода поисковика?
Боты искалок могут создавать серьезную нагрузку на сервер и тормозить работу сайта, при очень частом обновлении контента с очень большим кол-вом документов.
В разделах вебмастера, как в гугл, таки в яндексе об этом указывается.
В таких случаях, либо в метах, либо в параметрах карты сайта, можно указывать режим посещения сайта ботами.
На обычных сайтах, это делать не целесообразно. Слишком дорогА борьба за место под солнцем.
А на сайтах имеющих нагрузку как у хорошего портала, нет смысла это делать по тому, что такой сайт придется выносить на отдельный сервер. Там нагрузка от ботов пофигу.
Для подумать:
Документы этого ресурса - forum.searchengines.ru индексируются яндексом в течении 1-2 дней.