краулеры - это роботы поисковиков, которые индексируют содержание старниц  чтобы потом их можно было найти через поисковик )
__________________
Съешь еще этих мягких французских булок, да выпей чаю...
Всегда приятно беседовать с людьми высокого интеллекта и благородных идеалов.
(Приключения принца Флоризеля)
They come here. They all come here. How do they find me?
(c) Max Bialystock
|