1 (Вчера 14:51:26 отредактировано smsbox3)

Тема: Защита сайтов от парсинга.

Столкнулся с проверкой на бота - называется Анубис. Исходный код https://github.com/TecharoHQ/anubis
Полюбоваться на работу можно invidious.f5.si или invidious.nerdvpn.de
Осталось разобраться как обойти на php эти грабли.

вот, что пишут разработчики:
Anubis — это компромисс. Anubis использует схему Proof-of-Work, похожую на Hashcash, предлагаемую схему Proof-of-Work для борьбы со спамом в электронной почте. Идея заключается в том, что на отдельных уровнях дополнительная нагрузка игнорируется, но на уровне массового парсинга она накапливается и значительно удорожает сбор данных.

В конечном счете, это хак, чья настоящая цель — предоставить «достаточно хорошее» решение-заполнитель, чтобы можно было потратить больше времени на идентификацию и идентификацию headless-браузеров (например, по тому, как они выполняют рендеринг шрифтов), чтобы не отображать страницу с подтверждением работы пользователям, которые с гораздо большей вероятностью являются законными пользователями.

Обратите внимание, что Anubis требует использования современных функций JavaScript, которые такие плагины, как JShelter, отключают. Пожалуйста, отключите JShelter и другие подобные плагины для этого домена.