لماذا أحتاج إلى منصة أخرى لمراقبة الروبوتات؟

ما هو حجم مشكلة بوت التنكر؟

بشكل عام، يتم إنشاء أكثر من 50٪ من إجمالي حركة الإنترنت بواسطة الروبوتات. على الرغم من أن الأميال التي قطعتها قد تختلف، إلا أننا نجد أنه من بين 50٪ من حركة مرور الروبوتات التي من المحتمل أن تصل إلى موقعك، فإن ما يصل إلى 20٪ من هذه الروبوتات يتنكرون في زي روبوتات شرعية باستخدام سلسلة وكلاء مزيفة. والخبر السار هو أنه بمجرد تنفيذ VerifiedVisitors، فإننا نضمن أن الخدمات التي تضيفها بالفعل إلى قائمة الوصول الخاصة بك شرعية.

حماية نفسك من الأدعياء

يتم تحديد معظم برامج الروبوت اليوم بشكل أساسي من سلسلة وكيل المستخدم. من المهم أن تدرك أن سلسلة وكيل المستخدم يتم الإبلاغ عنها ذاتيًا بواسطة مؤلف الروبوت. على نحو فعال، الأمر متروك لكاتب الروبوت ليخبرك بدقة من هم.

يستغل مجرمو الإنترنت هذا بانتظام ويخفون الروبوتات الضارة بشكل روتيني على أنها روبوتات شرعية. سيتوخى مشرفو المواقع الحذر بشأن حظر مزود خدمة رئيسي مثل Google. يستغل مجرمو الإنترنت هذا الموقف ويبتكرون طرقًا ذكية لإخفاء الروبوتات الضارة الخاصة بهم. إذا كنت لا تستطيع الوثوق بسلسلة الوكيل - يمكن لمشرفي المواقع تشغيل بحث DNS عكسي. ومع ذلك، يستخدم مؤلفو الروبوتات الضارة أيضًا نطاقات IP من مزودي الخدمات السحابية الشرعيين، مما يزيد من إخفاء أصولهم. تخيل روبوتًا يستهلك الكثير من موارد الويب الخاصة بك ويبلغ عن Bing. يمكنك التحقق من ذلك ويتم حله إلى نطاق Microsoft IP، ولكن هل هو Bing حقًا؟ قد يكون الأمر كذلك، ولكن على الأقل سيؤدي الفحص إلى الشك وإضاعة وقتك.

يوفر هؤلاء المحتالون مشكلة حقيقية لأي شخص يتطلع إلى السماح لوكلاء مستخدم الروبوت. إذا كنت لا تستطيع الوثوق بسلسلة الوكيل أو نطاق IP - كيف يمكنك معرفة ما إذا كان الروبوت أصليًا؟

ماذا يحدث إذا سمحت لعميل مختطف؟

بدون التحقق، يتمثل خطر السماح بسلسلة الوكيل في أن الروبوت الضار يُمنح تحديدًا حق الوصول إلى نطاقك ويتم استبعاده من المزيد من التدقيق. إن إضافة الوكيل المحتال إلى قائمة الوصول هو بالضبط ما يريد مجرمو الإنترنت أن تفعله. لقد قمت بإنشاء أرض خصبة مثالية لإنشاء سلبيات كاذبة؛ يتم الوثوق بالروبوتات التي يجب حظرها بدلاً من ذلك. وبالمثل، إذا قام روبوت شرعي بتغيير سلسلة الوكلاء الخاصة به، وهو ما يحدث طوال الوقت، فلن يكون موجودًا في قائمة الوصول الخاصة بك، وقد ينتهي بك الأمر إلى حظر خدمة شرعية يحتاجها فريق التسويق بالفعل.

مخاطر استخدام قوائم الحظر

إذا كانت قوائم الوصول يمكن أن تؤدي إلى عدد كبير من السلبيات الكاذبة، فقد تتسبب قوائم الحظر في مستويات عالية من الإيجابيات الكاذبة؛ أما البوتات التي يمكن الوثوق بها فيتم حظرها. غالبًا ما يتم الحظر أثناء التعرض للهجوم، وعادة ما تنمو هذه القوائم وتنمو على مر السنين، مع القليل من الصيانة أو بدونها. غالبًا ما يتم فقدان السبب الأصلي للحظر، وسرعان ما تصبح القائمة مكتبة قديمة من القواعد القديمة تقريبًا منذ لحظة كتابتها. بمرور الوقت، تعيد شبكات الروبوت اليوم عنوان IP الخاص بها إلى المالك الشرعي الذي يمكنه إنشاء سلاسل من الإيجابيات الكاذبة التي يصعب تتبعها وتتبعها.

مصادقة البوت متعددة العوامل

علينا الانتقال من الروبوتات «الجيدة» أو «السيئة» إلى الروبوتات «التي تم التحقق منها» أو «لم يتم التحقق منها»، وهذا ما نقوم به، جيدًا حقًا في VerifiedVisitors.

يوفر VerifiedVisitors خدمة اشتراك بسيطة قائمة على واجهة برمجة التطبيقات تقوم باستمرار بإجراء مجموعة من المصادقات متعددة العوامل للتحقق من أن الوكيل الذي تسمح به شرعي. يتغير الإنترنت باستمرار، لذلك يتم توفير خدمتنا كواجهة برمجة تطبيقات ويتم دفع التغييرات في الوقت الفعلي تقريبًا. هذا يعني أنه يمكنك أن تطمئن إلى أننا سنتحقق ديناميكيًا من كل وكيل في قائمتك. *نقوم بشكل استباقي باختبار كل وكيل تم التحقق منه في قاعدة البيانات الخاصة بنا للتأكد من شرعية الخدمة، بالإضافة إلى إجراء مجموعة من الاختبارات الأخرى، بما في ذلك فحص نمط الاستخدام الفعلي للوكيل نفسه.*

الزوار الذين تم التحقق منهم الذين تم تحديثهم ديناميكيًا

في حين أن نطاق وكلاء الروبوتات الشرعيين كبير جدًا، إلا أنه عالم معروف. لقد قمنا ببناء شبكتنا الخاصة لمراقبة نشاط الروبوت الشرعي هذا حتى نتمكن من تقديم الأفضل لك في التحقق لتحديد ما إذا كان وكيل الروبوت من مورد موثوق به، أم أنه مجرد تنكر. يتم إرسال التحديثات إلى خدمات API على الفور تقريبًا، حتى تتمكن من الاستفادة من أحدث البيانات التي تم التحقق منها المتاحة.

‍