ملف الروبوتات.txt توزيع الاستخدام في المكسيك

ليثبت ملف الروبوتات.txt توزيع الاستخدام في المكسيك

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	56,813	18.63
Googlebot Disallow	42,035	13.79
Google AdsBot Mobile Disallow	36,308	11.91
Ahrefs Bot Disallow	21,041	6.9
Anthropic Claude Bot Disallow	10,908	3.58
Baidu Bot Disallow	10,770	3.53
Robots Disallow	8,681	2.85
GPTBot Disallow	8,548	2.8
Common Crawl Bot Disallow	7,173	2.35
AppleBot Disallow	7,085	2.32
Google Bard Disallow	6,968	2.29
Facebook Bot Disallow	6,910	2.27
Apple AI Bot Disallow	6,847	2.25
Sogou Bot Disallow	6,800	2.23
Perplexity	6,743	2.21
Yandex Bot Disallow	6,729	2.21
Microsoft BingBot Disallow	6,632	2.18
Yahoo Slurp Disallow	6,389	2.1
Cohere AI Disallow	6,353	2.08
Alexa Bot Disallow	6,336	2.08
Google AdsBot Mobile Apps Disallow	6,311	2.07
Some Robots Disallow	5,952	1.95
Soso Bot Disallow	5,780	1.9
Semrush Bot Disallow	2,712	0.89
Majestic Bot Disallow	1,622	0.53
Google Media Partners Disallow	1,369 *	0.45
Google Image Bot Disallow	1,087	0.36
Microsoft MSNBot Disallow	911	0.3
Webz Omgili Disallow	763	0.25
ByteDance Bytespider Disallow	712	0.23
Exalead Bot Disallow	402	0.13
360 Bot Disallow	169	0.06
Diffbot Disallow	161	0.05
YOU Disallow	143	0.05
Google News Bot Disallow	128	0.04
Google DuplexWeb Disallow	102	0.03
DuckDuckGo Bot Disallow	92	0.03
Google Video Bot Disallow	88	0.03
Youdao Bot Disallow	83	0.03
Google Favicon Disallow	70	0.02
Google API Bot Disallow	70	0.02
BuiltWithBot Disallow	61	0.02
Pipl Disallow	42	0.01
Google FeedFetcher Disallow	2	0

304,901 الاكتشافات

ل ملف الروبوتات.txt في المكسيك. آخر تحديث 17th جمادى الثانية 2024.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.