ملف robots.txt توزيع الاستخدام في بالاو

أعلى في ملف robots.txt توزيع الاستخدام في بالاو

تكنولوجيا	المواقع الالكترونية	%
Robots Disallow	2,608	15.9
Googlebot Disallow	2,161	13.18
Baidu Bot Disallow	1,930	11.77
Sogou Bot Disallow	1,850	11.28
Some Robots Disallow	1,591	9.7
Yandex Bot Disallow	922	5.62
Microsoft BingBot Disallow	881	5.37
Alexa Bot Disallow	873	70.4
Yahoo Slurp Disallow	862	5.26
Soso Bot Disallow	843	5.14
Google Media Partners Disallow	770 *	4.7
Google AdsBot Disallow	222	1.35
Ahrefs Bot Disallow	109	0.66
Majestic Bot Disallow	101	0.62
Semrush Bot Disallow	78	0.48
GPTBot Disallow	65	5.24
Common Crawl Bot Disallow	50	4.03
Microsoft MSNBot Disallow	46	0.28
360 Bot Disallow	37	0.23
Anthropic Claude Bot Disallow	34	2.74
Google Bard Disallow	30	2.42
Facebook Bot Disallow	29	2.34
AppleBot Disallow	28	0.17
Apple AI Bot Disallow	26	2.1
Exalead Bot Disallow	26	0.16
ByteDance Bytespider Disallow	25	2.02
Google Image Bot Disallow	25	0.15
Cohere AI Disallow	21	1.69
Perplexity	19	1.53
Webz Omgili Disallow	19	1.53
Google AdsBot Mobile Apps Disallow	18	0.11
BuiltWithBot Disallow	17	0.1
Diffbot Disallow	11	0.89
DuckDuckGo Bot Disallow	11	0.07
Youdao Bot Disallow	9	0.05
Google News Bot Disallow	8	0.05
Google Video Bot Disallow	8	0.05
Google Favicon Disallow	8	0.05
Google API Bot Disallow	8	0.05
Google DuplexWeb Disallow	8	0.05
YOU Disallow	7	0.56
Pipl Disallow	4	0.02

16,398 الكشف

ل ملف robots.txt في بالاو. آخر تحديث 23st شوال 2025.

Robots Disallow هي حاليًا التكنولوجيا الأكثر شيوعًا في هذه الفئة.