| Доброй ночи, Гость! Представляем Вам наши форумы. Вы можете зарегистрироваться чтобы писать на форумах или зайдите под своим именем, если Вы уже регистрировались. | |
Форум
Пользователи
Помощь
Поиск
Новые сообщения
Новые темы| | Похожие темы |
| |||
Понедельник, 04.11.2013, 01:42 Vampireos | тоже кстате меня достали)) толпами ходят на пустой мой сайт, и рыщут рыщут всё)) ..напомнил мне, такш вместе бум ставить над ними эксперименты  вариант первый, наверно самый правильный и лояльный по отношению к ним) в robots.txt пишем: User-agent: * Crawl-delay: 10000 Disallow: /lang/ Disallow: /admin/ 10000 это столько секунд, или 160 минут мы приказывает пустоголовым ботам ждать прежде, чем жадно всматриваться в надежде найти обновления на сайте, пусть задумаются над своим поведением  |
 |
Показать все сообщения
| |||
| Похожие темы | Предыдущая тема | Следующая тема |
| Быстрый переход: |
Сейчас на сайтеПользователей: 0, Гостей: 3
Поисковые боты: 221
Bot(195), oBot(16), BingBot(5), Googlebot(3), Yandex, Google
Статистика форума| Темы | Сообщения | Пользователи | |
| За сутки: | 0 | 0 | 0 |
| За неделю: | 0 | 0 | 0 |
| За месяц: | 0 | 0 | 0 |
| Всего: | 1444 | 9453 | 3410 |
| Мы приветствуем нового участника: dota812651 | |||
Дни рождения