ملف الروبوتات.txt توزيع الاستخدام في الأرجنتين

ليثبت ملف الروبوتات.txt توزيع الاستخدام في الأرجنتين

تكنولوجيا	المواقع الإلكترونية	%
Googlebot Disallow	17,833	13.29
Robots Disallow	11,326	8.44
Google AdsBot Disallow	10,985	8.19
Google AdsBot Mobile Disallow	9,859	7.35
Anthropic Claude Bot Disallow	8,857	6.6
Baidu Bot Disallow	8,352	6.23
Sogou Bot Disallow	6,621	4.94
Yandex Bot Disallow	6,576	4.9
Microsoft BingBot Disallow	6,014	4.48
Yahoo Slurp Disallow	5,945	4.43
Alexa Bot Disallow	5,811	4.33
Soso Bot Disallow	5,441	4.06
Some Robots Disallow	3,929	2.93
Ahrefs Bot Disallow	2,851	2.13
GPTBot Disallow	1,947	1.45
Majestic Bot Disallow	1,923	1.43
Common Crawl Bot Disallow	1,877	1.4
Semrush Bot Disallow	1,866	1.39
Google Bard Disallow	1,689	1.26
AppleBot Disallow	1,675	1.25
Facebook Bot Disallow	1,643	1.22
Google Media Partners Disallow	1,589 *	1.18
Cohere AI Disallow	1,516	1.13
Apple AI Bot Disallow	1,499	1.12
Perplexity	1,411	1.05
Google AdsBot Mobile Apps Disallow	1,343	1
Microsoft MSNBot Disallow	712	0.53
Google Image Bot Disallow	527	0.39
Exalead Bot Disallow	445	0.33
Pipl Disallow	410	0.31
Webz Omgili Disallow	373	0.28
ByteDance Bytespider Disallow	367	0.27
360 Bot Disallow	187	0.14
BuiltWithBot Disallow	149	0.11
Diffbot Disallow	124	0.09
YOU Disallow	94	0.07
Google Video Bot Disallow	69	0.05
DuckDuckGo Bot Disallow	69	0.05
Google News Bot Disallow	60	0.04
Google Favicon Disallow	50	0.04
Google API Bot Disallow	48	0.04
Google DuplexWeb Disallow	48	0.04
Youdao Bot Disallow	37	0.03
Google FeedFetcher Disallow	2	0

134,149 الاكتشافات

ل ملف الروبوتات.txt في الأرجنتين. آخر تحديث 04th رجب 2025.

Googlebot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.