ملف الروبوتات.txt توزيع الاستخدام في أنتيغوا وبربودا

ليثبت ملف الروبوتات.txt توزيع الاستخدام في أنتيغوا وبربودا

تكنولوجيا	المواقع الإلكترونية	%
Googlebot Disallow	349	11.84
Baidu Bot Disallow	238	8.07
Google AdsBot Disallow	196	6.65
Robots Disallow	171	5.8
Some Robots Disallow	163	5.53
Sogou Bot Disallow	159	5.39
Google AdsBot Mobile Disallow	154	5.22
Yandex Bot Disallow	141	4.78
Microsoft BingBot Disallow	134	4.55
Yahoo Slurp Disallow	132	4.48
Soso Bot Disallow	125	4.24
Alexa Bot Disallow	124	4.21
Google Media Partners Disallow	104 *	3.53
Ahrefs Bot Disallow	68	2.31
Anthropic Claude Bot Disallow	59	2
GPTBot Disallow	57	1.93
Common Crawl Bot Disallow	54	1.83
Google Bard Disallow	53	1.8
Facebook Bot Disallow	53	1.8
AppleBot Disallow	50	1.7
Cohere AI Disallow	49	1.66
Google AdsBot Mobile Apps Disallow	49	1.66
Apple AI Bot Disallow	48	1.63
Perplexity	46	1.56
Majestic Bot Disallow	28	0.95
Semrush Bot Disallow	27	0.92
ByteDance Bytespider Disallow	23	0.78
Google Image Bot Disallow	14	0.47
Microsoft MSNBot Disallow	12	0.41
Exalead Bot Disallow	9	0.31
Webz Omgili Disallow	9	0.31
360 Bot Disallow	9	0.31
Google News Bot Disallow	6	0.2
Google Video Bot Disallow	6	0.2
DuckDuckGo Bot Disallow	6	0.2
Google Favicon Disallow	6	0.2
Google API Bot Disallow	5	0.17
Google DuplexWeb Disallow	5	0.17
BuiltWithBot Disallow	4	0.14
Diffbot Disallow	1	0.03
YOU Disallow	1	0.03
Google FeedFetcher Disallow	1	0.03

2,948 الاكتشافات

ل ملف الروبوتات.txt في أنتيغوا وبربودا. آخر تحديث 17th جمادى الثانية 2024.

Googlebot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.