ملف الروبوتات.txt توزيع الاستخدام في جزر كوك

ليثبت ملف الروبوتات.txt توزيع الاستخدام في جزر كوك

تكنولوجيا	المواقع الإلكترونية	%
Googlebot Disallow	62	20.53
Common Crawl Bot Disallow	19	6.29
GPTBot Disallow	18	5.96
AppleBot Disallow	18	5.96
Anthropic Claude Bot Disallow	18	5.96
Google Bard Disallow	18	5.96
Facebook Bot Disallow	18	5.96
Apple AI Bot Disallow	18	5.96
Cohere AI Disallow	18	5.96
Perplexity	18	5.96
Google AdsBot Mobile Apps Disallow	18	5.96
Ahrefs Bot Disallow	14	4.64
Majestic Bot Disallow	12	3.97
Robots Disallow	5	1.66
Microsoft BingBot Disallow	5	1.66
Yandex Bot Disallow	4	1.32
Semrush Bot Disallow	4	1.32
Alexa Bot Disallow	3	0.99
Yahoo Slurp Disallow	3	0.99
Soso Bot Disallow	3	0.99
Google Image Bot Disallow	2	0.66
Exalead Bot Disallow	1	0.33
Microsoft MSNBot Disallow	1	0.33
360 Bot Disallow	1	0.33
BuiltWithBot Disallow	1	0.33

302 الاكتشافات

ل ملف الروبوتات.txt في جزر كوك. آخر تحديث 04th رجب 2025.

Googlebot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.