ملف الروبوتات.txt توزيع الاستخدام في هولندا

ليثبت ملف الروبوتات.txt توزيع الاستخدام في هولندا

تكنولوجيا	المواقع الإلكترونية	%
Googlebot Disallow	114,900	11.18
Google AdsBot Disallow	98,612	9.59
Baidu Bot Disallow	71,484	6.95
Ahrefs Bot Disallow	63,534	6.18
Google AdsBot Mobile Disallow	62,071	6.04
Robots Disallow	57,450	5.59
Majestic Bot Disallow	44,440	4.32
Yandex Bot Disallow	43,159	4.2
Some Robots Disallow	39,561	3.85
Sogou Bot Disallow	34,456	3.35
Semrush Bot Disallow	29,477	2.87
Alexa Bot Disallow	28,729	2.79
Microsoft BingBot Disallow	28,196	2.74
Yahoo Slurp Disallow	27,438	2.67
GPTBot Disallow	24,347	2.37
AppleBot Disallow	24,021	2.34
Soso Bot Disallow	23,946	2.33
Common Crawl Bot Disallow	23,069	2.24
Anthropic Claude Bot Disallow	21,730	2.11
Google Bard Disallow	20,221	1.97
Facebook Bot Disallow	19,372	1.88
Apple AI Bot Disallow	17,984	1.75
Perplexity	17,813	1.73
Cohere AI Disallow	17,759	1.73
Google AdsBot Mobile Apps Disallow	17,018	1.66
Exalead Bot Disallow	10,632	1.03
ByteDance Bytespider Disallow	9,348	0.91
Microsoft MSNBot Disallow	7,006	0.68
Google Image Bot Disallow	6,836	0.66
Google Media Partners Disallow	4,495 *	0.44
Webz Omgili Disallow	3,598	0.35
360 Bot Disallow	2,608	0.25
DuckDuckGo Bot Disallow	1,949	0.19
Diffbot Disallow	1,890	0.18
Google News Bot Disallow	1,339	0.13
BuiltWithBot Disallow	1,325	0.13
Google Video Bot Disallow	1,235	0.12
YOU Disallow	1,191	0.12
Google Favicon Disallow	1,163	0.11
Google API Bot Disallow	1,052	0.1
Google DuplexWeb Disallow	1,046	0.1
Pipl Disallow	360	0.04
Youdao Bot Disallow	89	0.01
Google FeedFetcher Disallow	21	0
Google Read Aloud Disallow	8	0
Google Web Light Disallow	6	0

1,027,984 الاكتشافات

ل ملف الروبوتات.txt في هولندا. آخر تحديث 17th جمادى الثانية 2024.

Googlebot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.