查看標記的文章 'robots'

 Как ограничить количество запросов от поисковых роботов

В случае активного добавления контента на сайт, повышенную нагрузку могут создавать роботы...