ملف الروبوتات.txt توزيع الاستخدام في جزر فيرجن البريطانية

ليثبت ملف الروبوتات.txt توزيع الاستخدام في جزر فيرجن البريطانية

تكنولوجيا	المواقع الإلكترونية	%
Googlebot Disallow	8,819	12.87
Baidu Bot Disallow	8,807	12.85
Some Robots Disallow	8,741	12.75
Yandex Bot Disallow	8,338	12.16
Sogou Bot Disallow	8,337	12.16
Microsoft BingBot Disallow	8,333	12.16
Yahoo Slurp Disallow	8,332	12.15
Soso Bot Disallow	8,332	12.15
Alexa Bot Disallow	113	0.16
Robots Disallow	65	0.09
GPTBot Disallow	30	0.04
Google Bard Disallow	28	0.04
Common Crawl Bot Disallow	27	0.04
AppleBot Disallow	27	0.04
Anthropic Claude Bot Disallow	27	0.04
Facebook Bot Disallow	27	0.04
Apple AI Bot Disallow	27	0.04
Cohere AI Disallow	24	0.04
Google AdsBot Mobile Apps Disallow	24	0.04
Perplexity	23	0.03
Google Media Partners Disallow	15 *	0.02
Majestic Bot Disallow	12	0.02
Semrush Bot Disallow	10	0.01
Ahrefs Bot Disallow	9	0.01
Webz Omgili Disallow	4	0.01
Google Image Bot Disallow	3	0
ByteDance Bytespider Disallow	2	0
Exalead Bot Disallow	2	0
Microsoft MSNBot Disallow	2	0
Diffbot Disallow	2	0
360 Bot Disallow	1	0
Google News Bot Disallow	1	0
Google Video Bot Disallow	1	0
DuckDuckGo Bot Disallow	1	0
Google Favicon Disallow	1	0
Google API Bot Disallow	1	0
Google DuplexWeb Disallow	1	0
Pipl Disallow	1	0

68,550 الاكتشافات

ل ملف الروبوتات.txt في جزر فيرجن البريطانية. آخر تحديث 17th جمادى الثانية 2024.

Googlebot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.