ما المقصود بزيارات الروبوت وكيفية اكتشاف زيارات الروبوت؟



هل تعرف حركة السير الآلي؟ إذا كنت لا تعرف الكثير ، فكن ضيفنا. سوف تتعلم المزيد عن زيارات الروبوتات ، والغرض منها ، ومدى ضررها وفائدتها ، وكيفية اكتشافها وحظرها.

في الماضي ، كنت دائمًا سعيدًا في أي وقت ألاحظ فيه بيانات الزيارات على موقعي وألاحظ زيادة في عدد الزوار. الآن أنا أعلم بشكل أفضل - ليست كل الزيارات التي تلاحظها على موقعك من صنع الإنسان. جزء كبير من زيارات الويب عبارة عن زيارات غير بشرية .

إذا لم تكن حريصًا ، فسوف ينتهي بك الأمر إلى اتخاذ قرارات خاطئة بناءً على مقاييس تفاعل مستخدمك ، والتي تلوثت بالفعل بزيارات الروبوت. لقد كنت هناك من قبل ، وأعرف كيف يمكن أن تؤدي الزيارات

السيئة إلى إفساد عملية اتخاذ القرار. فهي لا تؤدي فقط إلى إتلاف بيانات زياراتك ، ولكنها يمكن أن تكون ضارة أيضًا بموقعك.

نظرًا للتأثيرات الضارة التي تحدثها زيارات الروبوت على مواقع ، فمن المهم أن يعرف مالكو مواقع والمسؤولون عنها. ومع ذلك ، فإن عددًا هائلاً منهم لا يدركون حتى زيارات الروبوتات. من خلال التعرف

على زيارات الروبوتات ، وما الذي ينوون تحقيقه ، وكيف يمكن أن يؤدي ذلك إلى تدمير مواقعك ومقاييسها ، فسوف تصعد لعبتك وتمنعها - أو تستبعد بياناتها من بيانات اتخاذ القرار الخاصة بك. ستكون هذه المقالة بمثابة دليل نهائي لزيارات الروبوتات.

حركة بوت - نظرة عامة

زيارات الروبوت هي حركة يتم إنشاؤها بواسطة برامج الكمبيوتر والبرامج النصية. إنها زيارات غير بشرية إلى موقع ويب ، وعلى هذا النحو ، فمن المرجح أن تكون نوع الزيارات التي لا تحتاجها في

تحليلاتك. روبوتات الويب هي المصدر الرئيسي لزيارات الروبوتات. يتم تطوير برامج الروبوت لتنفيذ مهام محددة - وأحيانًا دورية على الإنترنت. نوع المهام التي من المفترض أن يقوموا بها هو المهام المتكررة والمملة والدنيوية والمستهلكة للوقت والتي سيجدها البشر غير جذابة ومضيعة للوقت. قد يكون هذا أي شيء

من النقر على الإعلانات كما هو الحال في حالة الاحتيال الإعلاني إلى زحف Googlebot إلى موقعك وفهرسته.

لا يهم ما إذا كان إجراء الروبوت يقع في فئة جيدة أو سيئة ، ما يهم هو أنك بحاجة إلى معرفة كيفية تمييزها عن بيانات الزيارات البشرية الخاصة بك. إحدى الإحصائيات المثيرة للاهتمام حول زيارات الروبوتات هي

أنها تمثل أكثر من 40 بالمائة من الزيارات على الإنترنت. أكثر من أي وقت مضى ، يعمل البشر بنشاط على أتمتة المزيد من إجراءاتهم عبر الإنترنت ، مثل أتمتة عمليات الشراء والتغريدات وجمع البيانات وغير ذلك الكثير.

روبوتات جيدة مقابل. الروبوتات السيئة

قبل أن ننتقل إلى بقية المناقشة ، من الأفضل أن أميز بين الروبوتات الجيدة والروبوتات السيئة حتى لا ينتهي بك الأمر بمنع الزيارات من الروبوتات الجيدة.

روبوتات جيدة

الروبوتات الجيدة هي تلك التي ليس لها آثار سلبية على أداء موقع ، والنتيجة النهائية لعملها مفيدة للمواقع التي تزورها. بعض برامج الروبوت الجيدة الأكثر شيوعًا على الإنترنت هي روبوتات محركات البحث مثل Googlebot.

يمكن أن يكون البعض الآخر عبارة عن روبوتات لمراقبة الموقع ، وروبوتات الدردشة ، وروبوتات مراقبة حقوق الطبع والنشر ، من بين أمور أخرى. على الرغم من أنها يمكن أن تكون مفيدة ، إلا أنك تحتاج إلى

منحهم التوجيهات المناسبة باستخدام ملف robots.txt ، حتى لا تؤثر على أداء موقعك. تحتاج أيضًا إلى فصل زيارات الروبوت عند إجراء أي تحليل لبيانات زياراتك.

الروبوتات السيئة

هؤلاء هم على موقعك لتحقيق مكاسب أنانية خاصة بهم. في معظم الحالات ، لا تتعرف برامج التتبع السيئة على التعليمات الموجودة في ملفات robots.txt وتحترمها. إنهم يقومون بمهام تتعارض مع شروط استخدام

موقع ، ولا يقدمون أي فائدة لمواقع التي يزورونها ، وقد ينتهي بهم الأمر إلى إبطاء أداء المواقع التي يتفاعلون معها. الغالبية العظمى من الروبوتات السيئة في السوق تحاكي Google Chrome لتفادي الاكتشاف والحظر. عليك أن تبحث عن طرق لاكتشافها وحظرها. وستتم مناقشة هذه الطرق لاحقًا في المقالة.

أنواع الروبوتات السيئة التي لا تريد الزيارات منها

ليس هناك شك في أنه بدون الروبوتات الجيدة ، لن يكون الإنترنت على ما هو عليه ، ولن يستمتع موقعك بما يستمتع به من حيث زيارات المستخدمين. ومع ذلك ، فإن الروبوتات السيئة تدمر الإنترنت. نظرًا لأنها لا

تفيد موقعك بأي شكل من الأشكال ، فأنت لا تحتاج إلى زيارات منها على موقعك. تحتاج إلى الانتباه لالزيارات من هذه الروبوتات السيئة والتراجع عن بعض أفعالهم إذا استطعت.

انقر فوق / عرض / تنزيل برامج الروبوت


لقد جمعت برامج تتبع النقرات ، وعرض الروبوتات ، وتنزيل برامج الروبوت معًا لسبب ما - فهي مخصصة للاحتيال. ستزور روبوتات النقر مواقع وتنقر على الإعلانات من أجل المطالبة بإيرادات غير مكتسبة. انقر فوق الروبوتات ، وعرض الروبوتات ، وتنزيل الروبوتات أيضًا لتزييف المشاركة. إنها أسوأ

أشكال الروبوتات التي يمكنها التعامل مع موقعك على الإطلاق ، والزيارات الخاصة بها سيئة لبيانات زياراتك. على مواقع مثل TikTok ، يمكن أن تزييف برامج الروبوت المشاركة وتجعل الفيديو ينتشر بسرعة. يمكنهم تضخيم المشاهدة وتحميل عدد التحميل وجعل المرء لديه أمل كاذب.

القشط الآلي

تهدف روبوتات الكشط إلى جمع البيانات من مواقع . ترسل هذه الروبوتات طلبات الويب إلى خوادم الويب لتنزيل صفحات الويب ذات الأهمية. ثم يقومون بتحليل البيانات المطلوبة. الغرض منها هو سرقة المحتوى دون إذن أصحاب مواقع .

تشتهر روبوتات الكشط بإبطاء أداء مواقع عن غير قصد لأنها ترسل طلبات كثيرة جدًا في دقيقة واحدة. بصفتك مالكًا لموقع ، قد تكون حماية موقعك من سرقة المحتوى عن طريق الكشط أمرًا صعبًا. ومع ذلك ، يمكنك جعل عملية الكشط غير جذابة من خلال توفير واجهات برمجة التطبيقات وتصميم أنظمة ذكية لمكافحة التجريف.

روبوتات البريد العشوائي

هل لاحظت عددًا كبيرًا من التعليقات غير المرغوب فيها التي يتم إسقاطها على مدونتك؟ هم في الغالب مؤتمتة ويسقطون من قبل المتطفلين. تقوم بعض spambots بذلك لأغراض بناء الروابط - البعض يفعل ذلك كأسلوب سلبي لتحسين محركات البحث في حالات أخرى للإضرار بترتيب المنافسين.

تعد زيارات روبوتات البريد العشوائي ضخمة على منصات الوسائط الاجتماعية الكبيرة مثل Twitter حيث يتم استخدامها للدعاية السياسية - وحملات التسويق عبر الإنترنت.

كيفية اكتشاف زيارات الروبوت

مما سبق ، يجب أن تكون قد فهمت أن زيارات الروبوتات تأخذ جزءًا كبيرًا من الزيارات على الإنترنت. بصفتك مسؤولاً عن موقع ، فأنت بحاجة إلى معرفة ما إذا كانت الزيارات في سجل أداة تحليل موقعك تحتوي على زيارات روبوت.

بالتأكيد ، لن تتمكن من تمشيط الطلبات الفردية يدويًا. ومع ذلك ، يمكنك معرفة ما إذا كانت الروبوتات تمضي يومًا مليئًا بمواقع الخاصة بك ، ثم توصل إلى إجراءات لمنعها من الزيارة. فيما يلي مؤشرات زيارات الروبوت التي يجب أن تبحث عنها دائمًا.

شذوذ في بيانات زياراتك


بصفتك مشرفًا على موقع ، هناك بعض مقاييس الزيارات التي يجب أن تراقبها ، وتلك التي تلاحظ أي شكل من أشكال الشذوذ فيها ، فقط اعلم أن زيارات الروبوت تفسد الأمور بالنسبة لك.

مشاهدة الصفحة ، ومعدل الارتداد ، ومتوسط ​​مدة الجلسة - ستساعدك هذه المقاييس الثلاثة على معرفة ما إذا كانت الروبوتات تتسلل إلى موقعك. عندما تلاحظ ارتفاعًا مفاجئًا في مشاهدة الصفحة ، وهناك أيضًا زيادة

غير معقولة في معدل الارتداد ، فخذ ذلك كمؤشر لروبوت الزيارات. يمكن أن يكون متوسط ​​مدة الجلسة أيضًا مؤشرًا. عندما يكون هناك تغيير كبير في هذه البيانات - وتكون المقاييس الأخرى أيضًا غير طبيعية ، فاعلم فقط أن الروبوتات تصل إلى موقعك.

اهتم بسرعة تحميل موقعك

على عكس مقاييس الزيارات ، لا يمكنك استخدام سرعة التحميل فقط للتوصل إلى نتيجة صحيحة مفادها أن الروبوتات تزعج موقعك. هذا بسبب وجود العديد من الأسباب وراء تباطؤ موقعك. قد تكون هذه مشكلة من الخادم ومن شبكتك وحتى تغيير حديث لموقع .

ومع ذلك ، عندما لا تكون كل هذه العناصر في مكانها ثم فجأة ، تبدأ سرعة تحميل صفحات الويب الخاصة بموقعك في الانخفاض ، ثم انظر إلى بيانات زياراتك. ستلاحظ ارتفاعًا. يمكن أن ترسل الروبوتات الكثير من الطلبات في دقيقة واحدة ، وسيؤثر ذلك على أداء مواقع منخفضة الطاقة.

مصادر الزيارات الفردية

في بعض الأحيان ، لكي تكتشف زيارات الروبوت إلى موقعك ، تحتاج إلى التعمق في سجل خادمك وإلقاء نظرة على البيانات الأولية هناك. سيؤدي القيام بذلك يدويًا إلى إهدار وقتك ولن يكون فعالًا وفعالًا. هناك

أدوات مثل Deep Log Analyzer ، والتي يمكنك استخدامها لاكتشاف مصادر الزيارات الفردية. إذا لاحظت عددًا كبيرًا جدًا من الطلبات الواردة من مواقع ليس لديك عادةً زيارات منها ، فاحسب ذلك على أنه زيارات روبوت. تعتبر ملاحظة العديد من الطلبات من نفس عنوان IP مؤشرًا أيضًا.

تحويل سيء

تترك بعض الروبوتات آثارًا يمكنك استخدامها كمؤشر. عندما تملأ الروبوتات النماذج ، فإنها تفعل ذلك في أمر غير مرغوب فيه ، باستخدام أسماء ورسائل بريد إلكتروني وأرقام هواتف مزيفة. البعض منهم يسقط

محتويات مكررة ، بينما يستخدم البعض الآخر جمل لا معنى لها. عندما تلاحظ أي شيء من هذا القبيل ، فاعلم فقط أن الروبوت وراء ذلك. تشتهر روبوتات بناء الروابط بإرسال رسائل آلية إلى أقسام التعليقات في المدونات.

كيفية منع زيارات الروبوت

يجب أن أكون صريحًا معك هنا - من الصعب للغاية حظر كل زيارات الروبوتات السيئة. لم تكن الشركات الكبيرة قادرة على القيام بذلك. وذلك لأن معظم هذه الروبوتات تظهر كمستخدمين شرعيين باستخدام سلسلة

وكيل المستخدم من المتصفحات الشائعة. على الرغم من أنه لا يمكنك حظر جميع زيارات الروبوت ، يمكنك جعل العملية غير جذابة وصعبة - سيؤدي ذلك إلى تقليل عدد الروبوتات التي ستتمكن من الوصول إلى موقعك.

تعيين وفرض حدود الطلب


الطريقة الأكثر شيوعًا لحظر زيارات الروبوتات هي وضع حدود لعدد الطلبات التي يمكن للجهاز إرسالها خلال فترة زمنية. تحتوي الأجهزة التي تدعم الإنترنت على عناوين IP مخصصة لها. على الرغم من أن

العنوان لا يظل كما هو بالنسبة لبعض الأجهزة ، إلا أنه يعد أفضل معرّف للأجهزة الموجودة على الإنترنت. لكل طلب يتم إرساله إلى موقعك ، يتم إرفاق عنوان IP مع الطلب. باستخدام هذا ، يمكنك تعيين حدود الطلب والتأكد من أن جهازًا معينًا لا يرسل أكثر من العدد المقبول من الطلبات.

عندما يحدث ذلك ، تقوم بإدراج عنوان IP في القائمة السوداء وحظره لمنعه من إرسال طلبات أخرى. أثناء تعيين هذا الحد ، تأكد من تعيينه بطريقة تجعله صديقًا للمستخدمين الثقلين. نظرًا لأن الروبوتات ترسل طلبات كثيرة جدًا ، فسوف تتجاوز هذا الحد وسيتم حظرها.

قم بإعداد خدمة Captcha على موقعك

Captcha هو اختبار يستخدم لاكتشاف ما إذا كانت الزيارات بشرية أم لا. تعد خدمة reCAPTCHA من Google ، التي يتم الاستهزاء بها بسهولة على البشر ، وبقوة على الأجهزة ، إحدى خدمات Captcha التي يمكنك استخدامها لمنع زيارات الروبوتات. أنا متأكد من أنك قد أجبرت على حل Captchas من قبل. يحدث هذا عندما يكون هناك شيء غير عادي بشأن زياراتك - عليك إثبات أنك إنسان لمواصلة الوصول إلى موقع في تلك اللحظة. تجد معظم برامج الروبوت صعوبة في حل Captchas ، وعلى هذا النحو ، يمكن أن تكون فعالة في بعض الحالات.

استخدم حل إدارة الروبوت


قد لا تكون الطريقتان المذكورتان أعلاه فعالتين للغاية. إلى جانب ذلك ، قد لا يكون لديك المعرفة التقنية والوقت والصبر لإدارة زيارات الروبوت بشكل فعال. لهذا السبب ، يعد استخدام حل إدارة الروبوت أمرًا

جيدًا للغاية. يستخدم حل إدارة الروبوتات مثل برنامج Cloudfare Bot Management الكثير من المؤشرات والذكاء الاصطناعي لمنع زيارات الروبوتات.

أسئلة وأجوبة حول زيارات الروبوت

هل زيارات الروبوت ضارة بموقعي على الويب؟

يمكن أن تؤدي زيارات الروبوت ، سواء كانت جيدة أو سيئة ، إلى تشويه مقاييس تفاعل المستخدم على موقعك. ومع ذلك ، عندما يتعلق الأمر بالمعنى الحقيقي لكلمة (ضار) ، يمكن أن تكون الروبوتات السيئة

ضارة. يمكن أن تبطئ الروبوتات السيئة موقع أو حتى تعطل الخادم بسبب كثرة الطلبات في حالة هجوم رفض الخدمة (DOS) . كما أنهم يسرقون المحتوى ويمكن أن يضروا بمحسنات محركات البحث الخاصة بك. إنهم يعطون أملًا كاذبًا أيضًا.

هل يمكن حظر زيارات الروبوت؟

كما ذكرنا سابقًا ، لا يمكنك منع كل زيارات الروبوتات. يمكنك فقط أن تجعل الأمر صعبًا وغير جذاب - ثم تستبعد بيانات الزيارات من تحليل زياراتك. ما يجعل من الصعب منعه هو أن مطوري الروبوتات يستخدمون تقنيات لتجنب الاكتشاف. خذ ، على سبيل المثال ، استخدام الوكلاء وأدوات حلول Captchas التي تجعل تتبع IP و Captchas عديمة الفائدة ، على التوالي.

كيفية استبعاد زيارات Bot من Google Analytics

يمكن لبرنامج Google Analytics اكتشاف زيارات الروبوت. نأمل أن نتمكن من الاستفادة منها للحصول على مقاييس الزيارات الفعلية عن طريق استبعاد زيارات الروبوت من البيانات الإجمالية. للقيام بذلك ، انتقل إلى عرض الإعدادات ابحث عن خانة اختيار تصفية الروبوت وحدده . ثم احفظ.

كيفية إيقاف زيارات بوت على ووردبريس؟

لا يساعدك WordPress في حظر زيارات الروبوت افتراضيًا. يجب عليك إعداده عن طريق تثبيت إضافات bot blocking. هناك الكثير منهم يمكنك تثبيته. تعد إضافات Blackhole و Cloudfare WordPress خيارات جيدة.

استنتاج

أصبحت زيارات الروبوتات جزءًا من الإنترنت لدينا اليوم ، ولا يبدو أنها ستنطلق في أي وقت قريب. في حين أن بعضها جيد ، إلا أن الأجزاء الأكبر سيئة ، وعلينا أن نحترس من العبث بالأشياء بالنسبة لنا.

لسوء الحظ ، قد يكون اكتشافها وحظرها صعبًا للغاية مما نعتقد. في حين أن القيام بذلك بشكل صريح سيكون صعبًا ، إلا أن جعل الوصول إلى الموقع صعبًا عن طريق الروبوتات سيقلل من زيارات الروبوتات. إذا استطعت ، فقم بتوفير واجهات برمجة التطبيقات للمطورين تمامًا كما فعل Twitter.
تعليقات



    حجم الخط
    +
    16
    -
    تباعد السطور
    +
    2
    -