ملف robots.txt توزيع الاستخدام في أذربيجان

أعلى في ملف robots.txt توزيع الاستخدام في أذربيجان

تكنولوجيا	المواقع الالكترونية	%
Robots Disallow	626	22.7
Googlebot Disallow	543	19.69
Google AdsBot Disallow	310	11.24
Google AdsBot Mobile Disallow	277	10.04
Yandex Bot Disallow	216	7.83
Ahrefs Bot Disallow	91	3.3
Some Robots Disallow	78	2.83
Baidu Bot Disallow	64	2.32
Sogou Bot Disallow	55	1.99
Semrush Bot Disallow	48	1.74
Majestic Bot Disallow	45	1.63
Google Media Partners Disallow	40 *	1.45
GPTBot Disallow	34	17.99
Microsoft BingBot Disallow	30	1.09
Alexa Bot Disallow	30	15.87
Common Crawl Bot Disallow	30	15.87
Yahoo Slurp Disallow	29	1.05
Soso Bot Disallow	26	0.94
Microsoft MSNBot Disallow	26	0.94
Anthropic Claude Bot Disallow	17	8.99
AppleBot Disallow	16	0.58
Google Bard Disallow	15	7.94
Facebook Bot Disallow	12	6.35
Exalead Bot Disallow	12	0.44
360 Bot Disallow	12	0.44
Cohere AI Disallow	9	4.76
Apple AI Bot Disallow	9	4.76
ByteDance Bytespider Disallow	9	4.76
Perplexity	8	4.23
Google AdsBot Mobile Apps Disallow	8	0.29
Webz Omgili Disallow	7	3.7
BuiltWithBot Disallow	7	0.25
Google Image Bot Disallow	6	0.22
Google News Bot Disallow	2	0.07
Google Video Bot Disallow	2	0.07
DuckDuckGo Bot Disallow	2	0.07
Google Favicon Disallow	2	0.07
Google API Bot Disallow	2	0.07
Google DuplexWeb Disallow	2	0.07
LLMS Text	1	0.04

2,758 الكشف

ل ملف robots.txt في أذربيجان. آخر تحديث 23st شوال 2025.

Robots Disallow هي حاليًا التكنولوجيا الأكثر شيوعًا في هذه الفئة.