COMPAGRAM ANALİZ ARAÇLARI
Robots.txt Oluşturucu
Robots.txt destekleyen tarayıcılara hangi yolların taranabileceğini bildirir. Dosya bir kimlik doğrulama veya içerik gizleme mekanizması değildir.
KULLANIM REHBERİ
Robots.txt Oluşturucu nasıl kullanılır?
İhtiyacınız olan veriyi hazırlayın, sonucu kapsamıyla birlikte değerlendirin.
- 01
Tarayıcı adını ve yol kurallarını belirleyin.
- 02
Varsa tam site haritası adresini ekleyin.
- 03
Çıktıyı alan adının kök dizininde test edin.
SONUCU YORUMLARKEN
Verinin söylediği.
Kontrolün sınırları.
- Disallow edilen bir URL başka kaynaklardan keşfedilebilir. İndeksten kaldırma amacı ile taramayı engelleme amacı farklıdır.
SIKÇA SORULAN SORULAR
Robots.txt Oluşturucu hakkında
Kullanım ve sonuçların kapsamıyla ilgili temel bilgiler.
Gizli yönetim panelimi robots.txt ile koruyabilir miyim?
Hayır. Hassas alanlar sunucu tarafında kimlik doğrulama ve erişim kontrolüyle korunmalıdır.