Фокси Форум

Очередной ламповый форум для вебмастеров о seo, заработке в интернете, создании сайтов, дорвеях, партнерках, крипте, ботах и антиботах.

Meikler Meikler · UserID: 324 · Рег: 14.05.2025
Meikler
Meikler
UserID: 324
Рег: May 14, 2025
Тема: Может ли антибот блокировать полезных ботов Яндекса и Google?

Всем привет! Несколько месяцев назад установили на два сайта анти-бота в целом была проблема с прямыми заходами, с которыми антибот справился на УРА!

Но органический трафик стал проседать, как с Яндекса так и с Google, может мы что-то не так настроили, или может есть конкретно белый список ботов, который можно разместить в исключение, чтоб в отношении этих ботов не было не каких перепроверок или блокировок?? Если есть, то пожалуйста поделитесь данным списком, или помогите добраться до истины.

Вот как пример, антибот блокирует бота Google pagespeed, хотя для Google search-console это важный ресурс на проверку оптимизации сайта

https://disk.yandex.ru/i/UB1yY6AR7m-k9Q

Прихожу к такому мнению, что ненароком может еще какие-то полезные боты могут попадать под проверку или блокировку, пожалуйста поделитесь своими мыслями, и очень хотелось бы услышать развернутый ответ от создателя антибота.

14 мая 2025 в 14:13
Mik Foxi Mik Foxi · UserID: 2 · Рег: May 07, 2020
Mik Foxi
Mik Foxi
UserID: 2
Рег: May 07, 2020
PostID: 746
# 1
Re: Может ли антибот блокировать полезных ботов Яндекса и Google?

По умолчанию в разрешенные в 3 таблицу правил добавлены боты индексаторы: яндекс, гугл, бинг.

Пейджспид бот добавлен в выключенном виде, его надо включить, чтобы разрешить. Подробнее про ботов которых возможно понадобится добавить: https://antibot.cloud/FAQ/good-bots.html

14 мая 2025 в 14:20
Meikler Meikler · UserID: 324 · Рег: May 14, 2025
Meikler
Meikler
UserID: 324
Рег: May 14, 2025
PostID: 771
# 2
Re: Может ли антибот блокировать полезных ботов Яндекса и Google?

Спасибо за ответ, есть еще уточняющий вопрос, в таблице №3 не увидел не в юзерагентах не в ptr "ya.ru" или достаточно "yandex.com" он определяет ip всех яндекс ботов?

23 мая 2025 в 12:32
Mik Foxi Mik Foxi · UserID: 2 · Рег: May 07, 2020
Mik Foxi
Mik Foxi
UserID: 2
Рег: May 07, 2020
PostID: 772
# 3
Re: Может ли антибот блокировать полезных ботов Яндекса и Google?

Meikler, ya.ru не нужен. он в PTR не встречается. Встречается в реферере.

23 мая 2025 в 16:28
Meikler Meikler · UserID: 324 · Рег: May 14, 2025
Meikler
Meikler
UserID: 324
Рег: May 14, 2025
PostID: 776
# 4
Re: Может ли антибот блокировать полезных ботов Яндекса и Google?

Спасибо за ответы, пока активировали всех ботов из таблицы №3 посмотрим как будет сказываться на двух сайтах.

24 мая 2025 в 13:39
Служба поддержки форума: Telegram: @MikFoxi, Email: admin@mikfoxi.com