Booter – Bots & Crawlers Manager
Booter - Bots & Crawlers Manager - это превентивная мера (предварительная обработка) и устранение повреждений, причиненных сканерами и ботами. Плагин использует ряд существующих технологий, которые известны сканерам и ботам, и продвигает их на шаг вперед - разумно и почти полностью автоматически. Чтобы плагин работал правильно, вы должны следовать инструкциям и вручную вводить некоторые данные (что должно быть сделано человеком, чтобы избежать ошибок). На уровне предотвращения Booter позволяет вам управлять и создавать расширенный динамический файл robots.txt. Просмотрите журнал ошибок 404, чтобы увидеть наиболее распространенные неверные ссылки. Блокировка плохих ботов, которые вызывают высокую нагрузку на сервер из-за очень частого обхода страниц или используются для поиска уязвимостей. На уровне обработки Booter позволяет ограничить количество запросов от сканеров и ботов, если или когда они превышают указанное количество запросов в минуту, они будут отклонены в течение определенного периода времени. Отклонение нежелательных ссылок самым быстрым способом, не просто блокируя, а отправляя соответствующий код статуса HTTP, чтобы поисковые системы забыли о них. Инструкция по применению при лечении повреждений Активировать плагин. Включите опцию журнала ошибок 404. Установите ограничение скорости доступа. Посмотрите журнал 404, попытайтесь найти общие части в URL-адресах, которые повторяются чаще всего. Введите общие части на страницу «отклонить ссылки» и убедитесь, что код отклонения - 410. Очистите журнал ошибок 404. Повторяйте процесс каждые несколько часов, пока журнал ошибок 404 не останется пустым. Проверяйте статус индексации вашего сайта каждые несколько дней.
Автор: uPress
Версия: 1.5.5
Последнее обновление: 2021-03-11 7:22am GMT