ملف الروبوتات.txt توزيع الاستخدام في أذربيجان

ليثبت ملف الروبوتات.txt توزيع الاستخدام في أذربيجان

تكنولوجيا	المواقع الإلكترونية	%
Googlebot Disallow	656	21.09
Robots Disallow	513	16.5
Google AdsBot Disallow	394	12.67
Google AdsBot Mobile Disallow	358	11.51
Yandex Bot Disallow	266	8.55
Ahrefs Bot Disallow	104	3.34
Some Robots Disallow	80	2.57
Baidu Bot Disallow	71	2.28
Semrush Bot Disallow	60	1.93
Google Media Partners Disallow	60 *	1.93
Majestic Bot Disallow	56	1.8
GPTBot Disallow	47	1.51
Sogou Bot Disallow	39	1.25
Microsoft BingBot Disallow	36	1.16
Alexa Bot Disallow	36	1.16
Common Crawl Bot Disallow	35	1.13
Microsoft MSNBot Disallow	31	1
Yahoo Slurp Disallow	30	0.96
Soso Bot Disallow	26	0.84
Google Bard Disallow	25	0.8
Anthropic Claude Bot Disallow	23	0.74
AppleBot Disallow	19	0.61
Facebook Bot Disallow	17	0.55
Apple AI Bot Disallow	14	0.45
Cohere AI Disallow	13	0.42
Perplexity	12	0.39
ByteDance Bytespider Disallow	12	0.39
Exalead Bot Disallow	12	0.39
Google Image Bot Disallow	12	0.39
Google AdsBot Mobile Apps Disallow	11	0.35
Webz Omgili Disallow	10	0.32
360 Bot Disallow	10	0.32
BuiltWithBot Disallow	6	0.19
Google News Bot Disallow	3	0.1
Google Video Bot Disallow	3	0.1
DuckDuckGo Bot Disallow	3	0.1
Google Favicon Disallow	2	0.06
Google API Bot Disallow	2	0.06
Google DuplexWeb Disallow	2	0.06
Diffbot Disallow	1	0.03

3,110 الاكتشافات

ل ملف الروبوتات.txt في أذربيجان. آخر تحديث 17th جمادى الثانية 2024.

Googlebot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.