MetaInspector

MetaInspector bir kazıyıcıdır. Şu anda yapay zeka veya AI ile ilgili olduğu bilinmemektedir. Bunun yanlış olduğunu düşünüyorsanız veya amacı hakkında daha fazla ayrıntı sağlayabilirseniz, lütfen bizimle iletişime geçin.

Çok çeşitli kullanım durumları nedeniyle, ziyaret davranışını doğru bir şekilde tahmin etmenin bir yolu yoktur. Kazıyıcılar robots.txt kurallarını göz ardı etmeleri ve izin verilmeyen içeriğe erişmeleriyle ünlüdür. Bu, özellikle genel bir amaç yerine belirli bir hedefe ulaşmak için gönderildiklerinde geçerlidir.

Detaylar

Kullanıcı aracısı (user agents), operatör hakkında detaylı bilgilere ve döküman dosylarına ulaşabilirsiniz.

Operatör	-
Dokümantasyon	https://github.com/jaimeiniesta/metainspector

robots.txt ile Engelleme

Web sitenizin robots.txt dosyasında kullanıcı aracısı belirteci kuralları belirleyerek MetaInspector botunu engelleyebilir veya erişimini sınırlayabilirsiniz.

# robots.txt
# Bu MetaInspector botunu engelleyecektir

User-agent: MetaInspector
Disallow: /