ملف robots.txt توزيع الاستخدام في بيتكيرن

أعلى في ملف robots.txt توزيع الاستخدام في بيتكيرن

تكنولوجيا	المواقع الالكترونية	%
Robots Disallow	8	20.51
Googlebot Disallow	3	7.69
Yandex Bot Disallow	3	7.69
Alexa Bot Disallow	2	5.13
GPTBot Disallow	2	5.13
Common Crawl Bot Disallow	2	5.13
AppleBot Disallow	2	5.13
Anthropic Claude Bot Disallow	2	5.13
Google Bard Disallow	2	5.13
Facebook Bot Disallow	2	5.13
Cohere AI Disallow	2	5.13
Apple AI Bot Disallow	2	5.13
Perplexity	2	5.13
Google AdsBot Mobile Apps Disallow	2	5.13
Microsoft BingBot Disallow	1	2.56
Yahoo Slurp Disallow	1	2.56
Soso Bot Disallow	1	2.56

39 الكشف

ل ملف robots.txt في بيتكيرن. آخر تحديث 07th رمضان 2025.

Robots Disallow هي حاليًا التكنولوجيا الأكثر شيوعًا في هذه الفئة.