בדיקת הגנת אתר: אנטי-בוט, WAF וקפצ׳ה

הזינו כתובת והשירות יפתח אותה כמו דפדפן. תראו איזה אנטי-בוט, WAF או קפצ׳ה יש באתר והאם הוא מגיש את הדף לבקשה בלי דפדפן.

לדוגמה:

מה הבדיקה מזהה

המערכות מזוהות לפי כותרות התגובה, העוגיות וקוד הדף. אנחנו מרחיבים את הרשימה כשאתרים משנים את ההגנה.

אנטי-בוט

  • Cloudflare Challenge
  • Cloudflare Bot Management
  • Akamai Bot Manager
  • DataDome
  • HUMAN (PerimeterX)
  • Kasada
  • Radware Bot Manager
  • Netacea
  • Variti
  • ServicePipe
  • Ozon Antibot
  • Wildberries Antibot
  • Avito Firewall

WAF והגנה מ-DDoS

  • Imperva (Incapsula)
  • AWS WAF
  • F5 BIG-IP ASM
  • Reblaze
  • Sucuri
  • Vercel Firewall
  • DDoS-Guard
  • Qrator
  • StormWall

קפצ׳ה

  • Cloudflare Turnstile
  • Yandex SmartCaptcha
  • Google reCAPTCHA
  • hCaptcha
  • GeeTest

CDN

  • Cloudflare
  • Akamai
  • Amazon CloudFront
  • Fastly

איך לקרוא את התוצאה

האתר הגיש את הדף

קוד 200 ודף רגיל. גם כאן יכול להיות אנטי-בוט: הוא עוקב אחרי קצב הבקשות ומפעיל בדיקה מאוחר יותר.

בדיקת דפדפן

במקום הדף הגיע סקריפט שבודק את הדפדפן. בלי להריץ JavaScript אי אפשר להמשיך.

קפצ׳ה

האתר מבקש לפתור קפצ׳ה. זה קורה בדרך כלל כשלכתובת ה-IP יש מוניטין רע או כשיש יותר מדי בקשות.

סירוב

קוד 403, 429 או 503 בלי דף בדיקה. האתר סגור לבקשות כאלה או לרשת הזו.

שאלות על בדיקת ההגנה

01איך השירות מזהה את הגנת האתר?
השרת פותח את הכתובת כמו דפדפן Chrome ובוחן את התגובה: כותרות, עוגיות וקוד הדף. כל מערכת הגנה משאירה עקבות משלה, למשל העוגייה __cf_bm של Cloudflare או _abck של Akamai, והבדיקה קוראת אותן.
02למה הסקרייפר שלי רואה משהו אחר?
אנחנו שולחים בקשה אחת מכתובות של Cloudflare. אנטי-בוטים מתחשבים בכתובת ה-IP, בקצב הבקשות ובהתנהגות, ולכן סקרייפר עם מאה בקשות בדקה יכול לקבל קפצ׳ה במקום שבו הבקשה הבודדת שלנו עברה.
03מה זו בדיקת דפדפן?
דף עם סקריפט שבודק אם דפדפן אמיתי פתח אותו: הוא מריץ JavaScript, קורא את טביעת האצבע ולפעמים מבקש להמתין. curl ו-requests לא עוברים דף כזה.
04האם פרוקסי עוזרים מול אנטי-בוט?
פרוקסי נותנים לבקשות כתובות IP שונות, והאנטי-בוט מפעיל בדיקות לעיתים רחוקות יותר. אם האתר דורש JavaScript, פרוקסי לבד לא מספיקים: צריך דפדפן או אנטי-דיטקט שהפרוקסי מחוברים אליו.
05השירות שומר את הכתובות שאני בודק?
לא. השרת פותח את הכתובת פעם אחת, מחזיר את התוצאה לדפדפן שלכם ולא שומר לא את הכתובת ולא את תגובת האתר.

כלי עזר נוספים

ה-IP שליה-IP שלכם, ASN, רשימות שחורות ודליפת WebRTCבודק פרוקסי ל-Linuxסקריפט Bash: בודק רשימה במאות תהליכונים, ב-RBL ובאתריםבודק פרוקסי ל-Windowsסקריפט PowerShell: בודק רשימה במאות תהליכונים, ב-RBL ובאתרים

פרוקסי לאתרים מוגנים

מאגרי MIX של עד 25,000 כתובות IP, תעבורה ללא הגבלה, HTTP ו-SOCKS5 באותו פורט, גישה לפי IP. שעת ניסיון עולה 1$.

לחבילות
התחברות/הרשמה