ملف الروبوتات.txt توزيع الاستخدام في الأردن

ليثبت ملف الروبوتات.txt توزيع الاستخدام في الأردن

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	720	14.72
Googlebot Disallow	530	10.83
Google AdsBot Mobile Disallow	515	10.53
Robots Disallow	296	6.05
Ahrefs Bot Disallow	248	5.07
Common Crawl Bot Disallow	163	3.33
GPTBot Disallow	159	3.25
Anthropic Claude Bot Disallow	157	3.21
AppleBot Disallow	156	3.19
Google Bard Disallow	156	3.19
Facebook Bot Disallow	154	3.15
Apple AI Bot Disallow	152	3.11
Google AdsBot Mobile Apps Disallow	152	3.11
Cohere AI Disallow	151	3.09
Perplexity	151	3.09
Baidu Bot Disallow	143	2.92
Some Robots Disallow	128	2.62
Yandex Bot Disallow	117	2.39
Sogou Bot Disallow	100	2.04
Yahoo Slurp Disallow	95	1.94
Microsoft BingBot Disallow	88	1.8
Alexa Bot Disallow	84	1.72
Soso Bot Disallow	74	1.51
Semrush Bot Disallow	40	0.82
Majestic Bot Disallow	37	0.76
Google Media Partners Disallow	34 *	0.7
Microsoft MSNBot Disallow	21	0.43
Google Image Bot Disallow	14	0.29
ByteDance Bytespider Disallow	8	0.16
Exalead Bot Disallow	7	0.14
Webz Omgili Disallow	5	0.1
360 Bot Disallow	5	0.1
Google News Bot Disallow	5	0.1
Google Video Bot Disallow	5	0.1
BuiltWithBot Disallow	4	0.08
DuckDuckGo Bot Disallow	4	0.08
Google Favicon Disallow	3	0.06
Youdao Bot Disallow	3	0.06
Google API Bot Disallow	3	0.06
Google DuplexWeb Disallow	3	0.06
Diffbot Disallow	1	0.02
YOU Disallow	1	0.02

4,892 الاكتشافات

ل ملف الروبوتات.txt في الأردن. آخر تحديث 04th رجب 2025.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.