ملف الروبوتات.txt توزيع الاستخدام في بنما

ليثبت ملف الروبوتات.txt توزيع الاستخدام في بنما

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	1,594	17.93
Google AdsBot Mobile Disallow	940	10.57
Googlebot Disallow	917	10.31
Ahrefs Bot Disallow	683	7.68
Robots Disallow	329	3.7
GPTBot Disallow	302	3.4
AppleBot Disallow	285	3.21
Common Crawl Bot Disallow	282	3.17
Anthropic Claude Bot Disallow	282	3.17
Facebook Bot Disallow	278	3.13
Google Bard Disallow	276	3.1
Perplexity	276	3.1
Apple AI Bot Disallow	275	3.09
Cohere AI Disallow	275	3.09
Google AdsBot Mobile Apps Disallow	273	3.07
Google Media Partners Disallow	253 *	2.85
Baidu Bot Disallow	192	2.16
Some Robots Disallow	148	1.66
Yandex Bot Disallow	143	1.61
Yahoo Slurp Disallow	140	1.57
Alexa Bot Disallow	119	1.34
Sogou Bot Disallow	107	1.2
Microsoft BingBot Disallow	104	1.17
Majestic Bot Disallow	86	0.97
Semrush Bot Disallow	84	0.94
Soso Bot Disallow	77	0.87
Microsoft MSNBot Disallow	65	0.73
Google Image Bot Disallow	34	0.38
Exalead Bot Disallow	20	0.22
ByteDance Bytespider Disallow	12	0.13
Webz Omgili Disallow	8	0.09
Youdao Bot Disallow	8	0.09
360 Bot Disallow	5	0.06
YOU Disallow	4	0.04
Diffbot Disallow	3	0.03
Google News Bot Disallow	3	0.03
Google Video Bot Disallow	3	0.03
Google Favicon Disallow	3	0.03
BuiltWithBot Disallow	1	0.01
DuckDuckGo Bot Disallow	1	0.01
Google API Bot Disallow	1	0.01
Google DuplexWeb Disallow	1	0.01

8,892 الاكتشافات

ل ملف الروبوتات.txt في بنما. آخر تحديث 17th جمادى الثانية 2024.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.