LisanBot

LisanBot هو زاحف الويب الذي تشغّله شركة Lisan (LISAN AI - FZE، دبي). يعرّف عن نفسه في كل طلب بالاسم LisanBot/1.0 (+https://lisan.com/bot)، ويجلب الصفحات من عنوان واحد ثابت، makhzan-bot-5jhjvuzuldqgm.centralus.cloudapp.azure.com (20.109.207.167)، يدل البحث العكسي عنه على ذلك المضيف. أي زاحف يستخدم هذا الاسم من عنوان آخر ليس زاحفنا.

ما يقرأه

صفحات الويب العامة فقط: مواقع الشركات (الصفحة الرئيسية، ومن نحن، والفريق، والمنتجات، والتواصل)، وبوابات المناقصات والمشتريات العامة، والسجلات التجارية العامة، وإعلانات الأسواق المالية. يقرأ صفحة واحدة في كل مرة من الموقع، بفاصل ثانيتين بين الطلبات، أو بالمهلة التي يطلبها ملف robots.txt الخاص بكم حتى عشر ثوانٍ. لا يسجّل الدخول أبداً، ولا ينشئ حساباً، ولا يملأ نموذجاً، ولا يتجاوز أي تحقق يطلب منه إثبات أنه إنسان. الصفحة التي تطلب أي شيء من ذلك تُسجَّل مغلقة وتُترك سبعة أيام، وبعد ثلاث إجابات متتالية من هذا النوع يبتعد تسعين يوماً.

ملف robots.txt

مُحترَم. يقرأ LisanBot ملفكم قبل أي صفحة أخرى في موقعكم ويعيد قراءته كل 24 ساعة. يتبع المجموعة المخصصة لـ LisanBot إن وُجدت، وإلا فمجموعة *. أي Disallow هو رفض، ولا تُجلب الصفحة أبداً. ويُحترَم Crawl-delay حتى عشر ثوانٍ.

ما يحتفظ به

نسخة من كل صفحة كما وردت، وعنوانها، ووقت قراءتها، وترويسات الاستجابة. من هذه تبني Lisan سجلات للشركات والمناقصات تُستخدم داخل منتجات Lisan. لا تعيد Lisan نشر صفحاتكم. تُقرأ الصفحة مجدداً حين يُرجَّح أنها تغيّرت: بعد نحو 90 يوماً للشركات في الإمارات والسعودية وقطر والكويت والبحرين وعُمان، و180 يوماً لغيرها، وبوتيرة أقل حين لا يتغيّر شيء.

لإبعاده عن موقعكم

اكتبوا إلى bot@lisan.com مع اسم النطاق. يُستثنى الموقع في غضون سبعة أيام ويُحذف ما احتُفظ به منه. ويؤدي Disallow لـ LisanBot في ملف robots.txt الخاص بكم إلى الأثر نفسه للقراءات المقبلة في غضون 24 ساعة. وإن رأيتم أن LisanBot قرأ ما لا ينبغي له، فاكتبوا إلى العنوان نفسه مع ذكر الصفحات.