ملف الروبوتات.txt توزيع الاستخدام في برمودا

ليثبت ملف الروبوتات.txt توزيع الاستخدام في برمودا

تكنولوجيا	المواقع الإلكترونية	%
Common Crawl Bot Disallow	178	8.28
GPTBot Disallow	176	8.19
Google Bard Disallow	175	8.14
AppleBot Disallow	173	8.05
Anthropic Claude Bot Disallow	172	8
Facebook Bot Disallow	171	7.96
Apple AI Bot Disallow	171	7.96
Perplexity	170	7.91
Cohere AI Disallow	168	7.82
Google AdsBot Mobile Apps Disallow	168	7.82
Ahrefs Bot Disallow	106	4.93
Robots Disallow	81	3.77
Baidu Bot Disallow	30	1.4
Majestic Bot Disallow	28	1.3
Yandex Bot Disallow	25	1.16
Some Robots Disallow	24	1.12
Microsoft BingBot Disallow	21	0.98
Semrush Bot Disallow	21	0.98
Yahoo Slurp Disallow	18	0.84
Alexa Bot Disallow	15	0.7
Soso Bot Disallow	13	0.6
Google Image Bot Disallow	11	0.51
Microsoft MSNBot Disallow	8	0.37
Exalead Bot Disallow	7	0.33
ByteDance Bytespider Disallow	5	0.23
Webz Omgili Disallow	4	0.19
360 Bot Disallow	4	0.19
BuiltWithBot Disallow	3	0.14
Google News Bot Disallow	1	0.05
Google Video Bot Disallow	1	0.05
Google Favicon Disallow	1	0.05

2,149 الاكتشافات

ل ملف الروبوتات.txt في برمودا. آخر تحديث 04th رجب 2025.

Common Crawl Bot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.