فهرسة الإنترنت بواسطة الروبوت

ما هي الروبوتات التي تقوم بفهرسة مواقع الويب؟

تعرض هذه الصفحة برامج الروبوت والوكلاء الآليين الذين يزورون نقطة نهاية نطاق الجذر السري الخاص بنا منذ 03 محرم 1448. ولجعل العثور عليه أكثر صعوبة، كان اسم النطاق عبارة عن سلسلة عشوائية غامضة من الأحرف والأرقام على نطاق المستوى الأعلى (TLD) نادر الاستخدام. قام الموقع بتحميل JavaScript والصور والوسائط وتقنيات الويب المتميزة لتحديد مدى عمق فهرسة الموقع.

أين المنافسين؟ 😳

منذ إنشاء موقعنا السري على 18th محرم 1448, لم تجد أي شركة تعتبر نفسها منافسة في مجال فهرسة التكنولوجيا على الموقع الإلكتروني في 64 استمرت التجربة لأيام.

 

عثرت شركة BuiltWith على الموقع الإلكتروني في غضون يومين من إنشائه. بدون أي علم داخلي من أنفسنا. وهذا يعني أنه إذا كنت تستخدم منافسًا لتتبع التكنولوجيا، فإنه سيفتقد المواقع بهامش كبير جدًا، إذا وجدها على الإطلاق.

183 تم تحديد وكلاء المستخدم 84,857 الطلبات في جميع أنحاء 53,653 جلسات من 8,926 عناوين IP. آخر تحديث للبيانات 07 ربيع الأول 1448 00:20 UTC.

anthropic.com تم التعرف عليه من خلال 4 وكلاء المستخدم, تحضير 803 طلبات من 38 عناوين IP.

كانت زيارتها الأولى 1 ساعة, 31 دقيقةs, 43 ثانيةs بعد أن أصبح الموقع نشطًا.

ربيع الأول 1448
anthropic.com
anthropic.com Artificial Intelligence

Anthropic develops Claude; its crawlers retrieve public web content for Claude search, user-requested browsing, and model development.
Mozilla/5.0 (compatible; ClaudeBot/1.0; +claudebot@anthropic.com)

2 أيام منذ إطلاق الموقع
anthropic.com
anthropic.com Artificial Intelligence

Anthropic develops Claude; its crawlers retrieve public web content for Claude search, user-requested browsing, and model development.
Mozilla/5.0 (compatible; Claude-Web/1.0; +https://www.anthropic.com)

0 أيام منذ إطلاق الموقع
anthropic.com
anthropic.com Artificial Intelligence

Anthropic develops Claude; its crawlers retrieve public web content for Claude search, user-requested browsing, and model development.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; ClaudeBot/1.0; +mailto:support@anthropic.com

0 أيام منذ إطلاق الموقع
anthropic.com
anthropic.com Artificial Intelligence

Anthropic develops Claude; its crawlers retrieve public web content for Claude search, user-requested browsing, and model development.
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)

0 أيام منذ إطلاق الموقع
تم إطلاق الموقع في 03 محرم 1448