Что делать, если Бот написал – Фасет заблокировал ваш IP

бан кранКраны по разному реагируют на разные IP адреса, и некоторые фасеты могут фильтровать пользователей для повышения качества трафика и улучшения условий для рекламодателей. При этом в бан (блокировка сбора) могут попасть и качественные домашние IP. В первую очередь это касается краны Coinpot и группы №6 из мониторинга.

Для Coinpot

Лучше всего использовать при регистрации почту Gmail, или хотя бы outlook.live 

При сборе на аккаунты с использованием русских почтовых сервисов (mail.ru, yandex, rambler и т.д.) вероятность бана увеличивается в разы. Даже если на IP выдали блокировку и аккаунт был с русской почтой, можно создать почту на зарубежном хостинге и успешно работать с этой группой.

Прокси для Coinpot строго зарубежные подходят.

Если Бот написал

Фасет заблокировал ваш IP

Your IP Adress +++.+++.+++.+++ was temporarily blocked, because of the large number of incorrect requests.

See you tomorrow.

то бот отключает к нему доступ, чтобы не тратить решения и время на сбор.

Спустя время (в этот же день или на следующий) проверьте вручную данный фасет на работу под этим IP/прокси,

если блок ушёл, то удалите файлы

C:\FF\ИМЯБОТА\StateData\имяфасета.json

и C:\FF\ИМЯБОТА\StateData\__global_state.json 

В этом файле записано состояние для скрипта сбора.

если блок остался, то удалите строки вызова этого крана из файла settings

Обратите внимание:

StateData так же пишется если на любом из этих фасетов есть проблемы с лимитами! То есть, в настройках или по умолчанию прописано выводить с 1000, а фасет говорит что “вам, сэр, надо набрать 20к”. И никуда от этого не деться! То есть файл в этой папке появился, а сбор идёт и никаких блокировок нет. Удалять его тогда не надо

Подробнее о том как снять блокировку IP для группы кранов №6

Остальные краны нормально реагируют в данном случае, так как на старый прокси уже не ведётся одновременный сбор.

Как краны узнают что есть прокси:

есть базы проксей, которые постоянно обновляются, и на которые нужна подписка, например вот:
www.maxmind.com/en/solutions/geoip2-enterprise-product-suite/anonymous-ip-database

Эти краны (кроме группы №6) просто подписаны на такую вот базу, и по ней банят. Запрос можно сделать сразу, а можно периодической задачей.

Поделиться с друзьями в соц. сетях:
Меню