رسالة الموقع
قبيلة بني " روبوتس " .. كل ما تريد معرفته عن الـ Bots و زياراتها المزيفة

قبيلة بني " روبوتس " .. كل ما تريد معرفته عن الـ Bots و زياراتها المزيفة

مين مننا ما شافش صندوق التحقق من إنك " بني آدم " و مش روبوت , أيه فايدته و أيه حكاية الروبوتات اللي بتزور مواقع الانترنت زي البني آدمين ؟
ده اللي هنحاول نفهمه في المقالة دي و نشوف تأثيره على موقعك ممكن يكون ايه.
قبيلة بني \" روبوتس \" .. كل ما تريد معرفته عن الـ Bots و زياراتها المزيفة

أولا خلينا نوضح ايه المقصود بـ زيارات الروبوتات أو الزيارات المزيّفة أو الـ Bot traffic ؟

المقصود بالزيارات المزيّفة أو الـ Bot_traffic كل زيارات المواقع اللي بيقوم بيها غير البني آدمين .. زيارات بتعملها برامج / سكربتات كمبيوتر سواء مبنية على الذكاء الصناعي أو برامج عادية , المهم إنها زيارات بتنفذها اﻵلة و مافيش إنسان حقيقي وراء هذه الزيارات.



هل كل زيارات الروبوتات Bot traffic سيئة و ذات تأثير سلبي ؟

بالرغم من إن مصطلح زيارات الروبوتس أو الزيارات المزيفة مرتبط بقوة بالتأثير السلبي إلا إن حقيقة الوضع بترجع للروبوت نفسه و غرضه من الزيارة , على سبيل المثال محرك البحث جوجل عنده مجموعة ضخمة جدا من عناكب البحث أو الـ Bots اللي بتزور صفحات المواقع باستمرار ﻷغراض اﻷرشفة و تسهيل وصول الزوّار الحقيقيين ليها حسب محتوى الصفحة و عبارات البحث .. لكن هل كل أغراض الروبوتس جيدة ؟ أكيد ﻷ و أغلبهم ﻷ جدا 😂



عالم الانترنت النهارده اصبح مزدحم جدا جدا بملايين الصفحات و مليارات المستخدمين حول العالم , و الشركات اصبحت تتنافس في تقديم مواقعها أو صفحاتها على مواقع التواصل الاجتماعي في أفضل شكل , أكبر عدد من الزيارات و اﻹعجابات و المشاركات .... إلخ
لكن هل كل هذه الزيارات , اﻹعجابات حقيقية قام بها أشخاص حقيقيون أم منها زيارات و إعجابات و مشاركات مزيفة ؟

طبعا ليست كلها حقيقية , و بنظرة سريعة لخدمات زيادة عدد زيارات موقعك , زيادة عدد متابعي صفحتك ... إلخ ستعرف أن هناك جزء كبير من هذه الزيارات و الإعجابات يتم بشكل آلي , بشكل مبرمج 👾.
و مع تعدد اﻷغراض , و تطور برمجيات الذكاء_الصناعي AI و تقنيات و وسائل تحليل البيانات العملاقة Big Data Analysis أصبحت أعداد الروبوتات في ازدياد مضطرب كل يوم حتى أن أعداد زيارات الروبوتات تجاوزت أعداد الزيارات الحقيقية بشكل كبير.


فما هي أغراض هذه الروبوتات أو الـ Bot traffic ؟

تتنوع و تختلف أغراض الروبوتات بحسب الغرض الذي صُممت من أجله فمنها الطيب و منها الخبيث , وهذا استعراض ﻷهم هذه الروبوتات
قبيلة بني \" روبوتس \" .. كل ما تريد معرفته عن الـ Bots و زياراتها المزيفة

1- عناكب محركات البحث Search Engine Spiders

بما أن الانترنت هو شبكة web فطبيعي أن يكون متصفّح الويب الذي يتنقل من رابط إلى رابط هو عنكبوت Spider و هو نفسه ما نسميه اليوم Robot أو Bot للاختصار , ببساطة هو برنامج صممته محركات البحث غرضه زيارة صفحات المواقع و أخذ نسخة من هذه الصفحات بعد تنقيحها و تحديد عناوينها الرئيسية و الفرعية بحيث يتم تسجيل هذه الصفحات في قاعدة بيانات محرك البحث بصورة تسهل البحث فيها عن أي معلومة , و بالتالي تقديم خدمة البحث لزوار الويب.

هذا النوع من الـ Bots يعتبر من أكثرها فائدة لك كصاحب موقع , و أيضا لمستخدمي الانترنت عامة ﻷنه يساعدك في زيادة عدد زوار موقعك , و يساعد المستخدمين في الحصول على المعلومة , أيضا هذا النوع من الـ Bots يمكننا أن نصفه بأنه " محترم " يراعي تعليماتك كصاحب موقع , فأنت كصاحب موقع تستطيع توجيه هذا الـ Bot إلى صفحات موقعك اﻷكثر أهمية , و منعه من دخول أو تتبع أو أرشفة صفحات أخرى أو أقسام بموقعك , و سوف يحترم هذا الـ Bot تعليماتك تماما , وسوف أخصص مقالة لهذا الموضوع إن شاء الله.


2- الروبوتات التحليلة و اﻹحصائية

بعض الشركات و المعامل , بل و الجامعات , تقوم بإنشاء روبوتات بحثية و إحصائية. تقوم هذه الروبوتات بزيارة صفحات الويب المختلفة بغرض جمع البيانات الموجودة بهذه المواقع لتحليلها و تقديم نتائج البحث و التحليلات للجهات المهتمة.

مثلا روبوت يقوم بزيارة مواقع الويب المختلفة و محاولة تحديد البرمجيات التي يعتمد عليها كل موقع يزوره , ثم في النهاية يُخرج لك تقرير بأن أكثر من 79% من مواقع الانترنت مبنية بلغة PHP , أو أن الوورد بريس يستحوذ على 38% من مواقع الويب , أو أن شبكة AWS تسيطر على أكثر من 40% من سوق الخدمات السحابية cloud ... إلى غير ذلك.

* ملحوظة , اﻷرقام حقيقية و ليست مجازية 😎

أيضا مثال آخر للروبوتات التحليلة , مواقع اختبارات السيو , تلك المواقع التي تعطيها رابط موقعك فتقوم بفحصه و تقييمه من حيث أداؤه في محركات البحث , هذه المواقع أيضا تعتمد على روبوتات تقوم بزيارة موقعك ( أو الموقع الذي تريد اختباره ) و تقوم بتحليل الموقع و إعطاءك تقرير بذلك.

هذه الروبوتات في مجملها هي مفيدة و إن كانت ربما لا تقدم فائدة مباشرة لك كصاحب موقع , بل وقد لا تقدم لك أي فائدة أصلا لا مباشرة و لا غير مباشرة , ولكنها حتى اﻵن ليست ضارة .. فقط ستجد في إحصائيات موقعك زيارات قد تحسبها أنت حقيقية و هي في الواقع مجرد روبوتات 😏.


3- روبوتات المراقبة Monitoring Bots

أنت كصاحب موقع يهمك بالدرجة اﻷولى أن يظل موقعك يعمل بشكل سليم طوال الوقت , و إذا حدث - لا قدر الله - و تعطل موقعك ﻷي سبب تريد أن تعرف ذلك في أسرع وقت لكي تتصرف و تعالج الخطأ فور وقوعه , ولكن هل تستطيع أن تقوم بزيارة موقعك كل دقيقة لكي تتحقق من ذلك بنفسك ؟
طبعا لا , حسنا ماذا لو قدمنا لك روبوت بسيط تكون تلك وظيفته , يقوم بزيارة موقعك كل دقيقة و إذا حدث أنه وجد موقعك لا يعمل فورا يقوم بإشعارك عن طريق رسالة على الموبايل أو البريد اﻷلكتروني أو نحو ذلك. هذا مثال من أمثلة روبوتات المراقبة.

مثال آخر , تخيل أن موقعك تصدّر محرك البحث جوجل لمجموعة من عبارات البحث و أن تريد أن تحافظ على تصدرك نتائج البحث و إذا حدث و تراجع ترتيب موقعك ﻷي من هذه العبارات يتم إشعارك فورا.

مثال ثالث برمجته بنفسي 😎😎
في عروض الجمعة البيضاء لموقع سوق كنت أراقب بعض السلع و برمجت روبوت بسيط وظيفته زيارة صفحات هذه السلع على موقع سوق و موقع جوميا , وإذا حدث أي تغير في سعر هذه السلع يتم إشعاري. ترو ستوري والله و الموضوع جد بسيط 😀


4- روبوتات استعراض الويب Web Scrapers

( الترجمة غير دقيقة ) هذه الروبوتات تقوم بتصفح مواقع الويب بحثا عن المعلومات القيّمة بغرض " إساءة استخدامها " , مثلا روبوت يقوم بتصفح الويب و كلما وجد عنوان بريد الكتروني مكتوب قام بتسجيل هذا العنوان في قاعدة بياناته بغرض إرسال رسائل دعائية أو Spam لهذه العناوين.

مثال آخر , روبوت يقوم بتصفح المواقع اﻹخبارية و كلما وجد خبر جديد أو مقالة جديدة يقوم بنسخها في موقع صاحب الروبوت طبعا بدون إذن الموقع اﻷصلي صاحب المقالة , فيكون لدينا مواقع عديدة بها محتوى كله مسروق , و مسروق بشكل آلي 😤😤.

طبعا هذه الروبوتات لن تحترم القواعد التي تحددها أن كصاحب موقع لما تسمح للروبوتات بزيارته و ما تمنعها منه , و عملية منع هذه الروبوتات ممكنة لكنها تحتاج لذكاء برمجي و مجهود كبير , و مع ظهور المزيد و المزيد من هذه الروبوتات كل يوم و تغيّر طريقتها في التصفح و اعتمادها على عناوين آيبيهات كثيرة يكون منعها أمر شاق جدا 😫.


5- روبوتات الرسائل العشوائية Spam Bots

هذه الرووبوتات لا تكتفي باستعراض محتوى الموقع و إنما تتجاوز ذلك إلى مرحلة المشاركة في الموقع كأنها إنسان حقيقي , فمثلا لو لديك فورم تسجيل عضويات يمكن أن تقوم بتسجيل حساب لنفسها , لديك فورم ﻹضافة تعليقات على المقالات تقوم هذه الروبوتات بكتابة تعليقات , غالبا تتضمن روابط تشعبية ( Hyper Links ) بغرض رفع ترتيبها في محركات البحث أو الاصطياد العشوائي للضحايا أو غير ذلك.

هل تذكر نموذج reCaptcha الذي تكلمت عنه في بداية المقال ؟
هذا النموذج غرضه الوحيد هو محاولة منع هذه الروبوتات الـ " خبيثة " من إضافة المشاركات أو إرسال الرسائل أو استخدام نماذج الموقع ( forms ) بصفة عامة.


6- روبوتات استكشاف الثغرات و نقاط ضعف الحماية Vulnerability Scanners

هذه الروبوتات تستعرض مواقع الويب المختلفة بحثا عن الثغرات البرمجية و نقاط الضعف ( Vulnerability ) بها , تعتمد هذه الروبوتات على قواعد بيانات يتم تحديثها باستمرار بـ أحدث الثغرات التي يتم اكتشافها و كيفية التحقق من وجود هذه الثغرة في أي موقع.

ربما يكون الاستخدام الغالب لهذا النوع من الروبوتات من جانب المخترقين بغرض البحث عن الضحايا , ولكن أيضا شركات الحماية و المعامل اﻷمنية تستخدم هذه الروبوتات ﻷغراض بحثية و تحليلية كما سبق و أشرنا.


7- روبوتات حجب الخدمة DDoS Networks

الكابوس 👺 كما اسميها .. هذه الروبوتات عبارة عن زيارات مكثفة وهمية يتم توجيهها لموقع الضحية بغرض واحد فقط , تعطيل هذا الموقع و جعله غير قادر على خدمة الزوار الحقيقيين .. حتى يصبح offline بشكل نهائي 😴😴.

بالرغم من وجود وسائل عديدة لمقاومة هذه الهجمات , منها وسائل مادية ( روترات خاصة للسيرفر ) , ومنها تقنيات برمجية و حاسوبية مثل الاستضافة السحابية Cloud Hosting إلا أنه إذا وُجِدَ فريق محترف من المخرّبين .. الموقع هيقع يعني هيقع 😈😈
قبيلة بني \" روبوتس \" .. كل ما تريد معرفته عن الـ Bots و زياراتها المزيفة

ده كان استعراض سريع للروبوتات و أغراضها المتعددة و إزاي بتشتغل بصفة عامة
نيجي للجزء الثاني من الموضوع :

ما هو التأثير السلبي على موقعك من زيارات الروبوتات ؟

زي ما شوفنا أي روبوت بتكون ليه وظيفة محددة بينفذها , و بينفذها عدد كبير جدا من المرّات خلال وقت قصير جدا , يعني مثلا الروبوت ممكن يستعرض 1000 صفحة من صفحات موقعك خلال أقل من دقيقة واحدة , فبغض النظر عن غرض الروبوت من استعراض موقعك .. الزيارات الكثيرة اللي هيتم تنفيذها خلال وقت قصير ممكن تتسبب في بطىء عام لموقعك و ده أحد التأثيرات السلبية.

أيضا اﻹحصائيات الخاصة بموقعك و مؤشرات أداؤه هتكون بياناتها غير دقيقة , وربما بعيدة أصلا عن الواقع , بسبب تكرار زيارات الروبوتات دي و أسلوبها المختلف تماما عن أسلوب الزائر الحقيقي .. مثلا يكون الزائر الحقيقي في المتوسط يستعرض من 4 إلى 5 صفحات من موقعك خلال الزيارة الواحدة , و متوسط مدة الزيارة 8 دقائق , بينما الروبوت يستعرض في المتوسط 90 صفحة خلال مدة 3 دقائق , و بالتالي لو لم تحذف تأثير زيارات الروبوتات هتلاقي إن اﻷرقام عندك اصبحت بعيدة تماما عن الواقع .. مثلا يصبح في اﻹجمالي إن الزائر ( روبوت و غير روبوت ) يستعرض 25 صفحة خلال متوسط مدة زيارة 4 دقائق 😱

كذلك لو تكلمنا عن استهلاك موارد السيرفر و على رأسها الترافيك , زيارات الروبوتات هتتسبب في استهلاك جزء من ترافيك السيرفر , خصوصا لو كانت روبوتات من نوع Web Scraping و كان غرضها سحب نسخة من محتوى موقعك , و لو كان محتوى موقعك عبارة عن فيديوهات أو الصور عالية الجودة .. هتزعل و تجيب ناس تزعل معاك 😂😂

يبقى لو عايزين نلخص التأثيرات السلبية لزيارات الروبوتات على موقعك , هتكون :
- بطىء عام للموقع
- استهلاك أكبر لموارد السيرفر , خصوصا الترافيك
- أرقام إحصائيات موقعك و معدلات أداؤه لا تعبر عن الوضع الحقيقي
- نشر محتوى عشوائي Spam على موقعك
- زيادة معدل الارتداد Increased bounce rate
- انخفاض معدل التحويلات Decrease in conversions

طبعا مش كل التأثيرات دي هتحصل بسبب زيارات الروبوتات , الموضوع متوقف على عدد الروبوتات اللي بتزور موقعك و أغراض هذه الروبوتات و طريقتك في مقاومتها أو تقليل ضررها .. وده إن شاء الله هيكون موضوع المقالة القادمة :

إزاي تكتشف الروبوتات في موقعك ؟
إزاي توجهها و تقلل آثارها السلبية على موقعك ؟
مشاركات ذات صلة