ملف الروبوتات.txt توزيع الاستخدام في سان مارينو

ليثبت ملف الروبوتات.txt توزيع الاستخدام في سان مارينو

تكنولوجيا	المواقع الإلكترونية	%
Robots Disallow	40	16.13
Googlebot Disallow	34	13.71
Ahrefs Bot Disallow	21	8.47
Semrush Bot Disallow	14	5.65
Baidu Bot Disallow	13	5.24
Yandex Bot Disallow	11	4.44
Anthropic Claude Bot Disallow	10	4.03
Some Robots Disallow	7	2.82
Microsoft BingBot Disallow	7	2.82
Alexa Bot Disallow	7	2.82
GPTBot Disallow	7	2.82
AppleBot Disallow	7	2.82
Majestic Bot Disallow	7	2.82
Sogou Bot Disallow	6	2.42
Yahoo Slurp Disallow	6	2.42
Soso Bot Disallow	6	2.42
Common Crawl Bot Disallow	6	2.42
Google Bard Disallow	6	2.42
Facebook Bot Disallow	6	2.42
Apple AI Bot Disallow	6	2.42
Cohere AI Disallow	5	2.02
Perplexity	5	2.02
Google AdsBot Mobile Apps Disallow	5	2.02
ByteDance Bytespider Disallow	2	0.81
Microsoft MSNBot Disallow	2	0.81
Exalead Bot Disallow	1	0.4
Webz Omgili Disallow	1	0.4

248 الاكتشافات

ل ملف الروبوتات.txt في سان مارينو. آخر تحديث 17th جمادى الثانية 2024.

Robots Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.