Перевірка захисту сайту: антибот, WAF і капча

Введіть адресу, і сервіс відкриє її як браузер. Ви побачите, який антибот, WAF чи капча стоїть на сайті і чи віддає він сторінку запиту без браузера.

Наприклад:

Що розпізнає перевірка

Системи визначаються за заголовками відповіді, куками й кодом сторінки. Список поповнюємо, коли сайти змінюють захист.

Антибот

  • Cloudflare Challenge
  • Cloudflare Bot Management
  • Akamai Bot Manager
  • DataDome
  • HUMAN (PerimeterX)
  • Kasada
  • Radware Bot Manager
  • Netacea
  • Variti
  • ServicePipe
  • Ozon Antibot
  • Wildberries Antibot
  • Avito Firewall

WAF і захист від DDoS

  • Imperva (Incapsula)
  • AWS WAF
  • F5 BIG-IP ASM
  • Reblaze
  • Sucuri
  • Vercel Firewall
  • DDoS-Guard
  • Qrator
  • StormWall

Капча

  • Cloudflare Turnstile
  • Yandex SmartCaptcha
  • Google reCAPTCHA
  • hCaptcha
  • GeeTest

CDN

  • Cloudflare
  • Akamai
  • Amazon CloudFront
  • Fastly

Як читати результат

Сайт віддав сторінку

Код 200 і звичайна сторінка. Антибот може стояти й тут: він стежить за частотою запитів і вмикає перевірку пізніше.

Перевірка браузера

Замість сторінки прийшов скрипт, який перевіряє браузер. Без виконання JavaScript далі не пройти.

Капча

Сайт просить розв’язати капчу. Зазвичай так буває, коли в IP погана репутація або запитів забагато.

Відмова

Код 403, 429 або 503 без сторінки перевірки. Сайт закритий для таких запитів або для цієї мережі.

Питання про перевірку захисту

01Як сервіс визначає захист сайту?
Сервер відкриває адресу як браузер Chrome і дивиться на відповідь: заголовки, куки й код сторінки. Кожна система захисту лишає свої сліди, наприклад кука __cf_bm у Cloudflare чи _abck в Akamai. За ними й визначається захист.
02Чому мій парсер бачить інше?
Ми робимо один запит з адрес Cloudflare. Антиботи враховують IP, частоту запитів і поведінку, тому ваш парсер із сотнею запитів на хвилину може отримати капчу там, де наш одиночний запит пройшов.
03Що таке перевірка браузера?
Це сторінка зі скриптом, який перевіряє, чи справжній браузер її відкрив: виконує JavaScript, дивиться на відбиток і іноді просить зачекати. curl і requests таку сторінку пройти не можуть.
04Чи допоможуть проксі з антиботом?
Проксі дають запитам різні IP, і антибот рідше вмикає перевірку. Якщо сайт вимагає виконати JavaScript, самих проксі мало: потрібен браузер або антидетект, а проксі підключаються до нього.
05Сервіс зберігає адреси, які я перевіряю?
Ні. Сервер відкриває адресу один раз, віддає результат у ваш браузер і не зберігає ні адресу, ні відповідь сайту.

Проксі для сайтів із захистом

Пули МІКС до 25 000 IP, безлімітний трафік, HTTP і SOCKS5 на одному порту, доступ за IP. Тестова година коштує $1.

Дивитися пакети
ВХІД/РЕЄСТРАЦІЯ