ملف الروبوتات.txt توزيع الاستخدام في قبرص

ليثبت ملف الروبوتات.txt توزيع الاستخدام في قبرص

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	1,087	13
Googlebot Disallow	858	10.26
Google AdsBot Mobile Disallow	831	9.94
Robots Disallow	477	5.71
Ahrefs Bot Disallow	377	4.51
GPTBot Disallow	317	3.79
Common Crawl Bot Disallow	305	3.65
AppleBot Disallow	288	3.45
Anthropic Claude Bot Disallow	288	3.45
Google Bard Disallow	283	3.39
Facebook Bot Disallow	283	3.39
Apple AI Bot Disallow	278	3.33
Perplexity	276	3.3
Cohere AI Disallow	274	3.28
Google AdsBot Mobile Apps Disallow	272	3.25
Yandex Bot Disallow	222	2.66
Baidu Bot Disallow	201	2.4
Alexa Bot Disallow	185	2.21
Yahoo Slurp Disallow	165	1.97
Sogou Bot Disallow	157	1.88
Google Media Partners Disallow	152 *	1.82
Microsoft BingBot Disallow	151	1.81
Some Robots Disallow	144	1.72
Soso Bot Disallow	131	1.57
Majestic Bot Disallow	106	1.27
Semrush Bot Disallow	83	0.99
Microsoft MSNBot Disallow	42	0.5
Exalead Bot Disallow	21	0.25
ByteDance Bytespider Disallow	19	0.23
Webz Omgili Disallow	16	0.19
Google Image Bot Disallow	14	0.17
360 Bot Disallow	13	0.16
YOU Disallow	7	0.08
BuiltWithBot Disallow	5	0.06
Diffbot Disallow	5	0.06
DuckDuckGo Bot Disallow	5	0.06
Google News Bot Disallow	4	0.05
Google API Bot Disallow	4	0.05
Google Video Bot Disallow	3	0.04
Google Favicon Disallow	3	0.04
Google DuplexWeb Disallow	3	0.04
Youdao Bot Disallow	2	0.02
Pipl Disallow	2	0.02

8,359 الاكتشافات

ل ملف الروبوتات.txt في قبرص. آخر تحديث 04th رجب 2025.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.