Robots.txt Oluşturucu
Arama motoru botlarını dizinlerinize yönlendirmek için robots.txt dosyası oluşturun.
Robots.txt Parametreleri
Oluşturulan Robots.txt
Nasıl Kullanılır?
Bot Seçin
Kuralların uygulanacağı arama motoru botunu (User-agent) belirleyin.
Yolları Tanımlayın
Botların girmesini engellemek istediğiniz yolları (Disallow) ekleyin.
Dosyayı Sitenize Yükleyin
Oluşan robots.txt kodunu kopyalayıp web sitenizin ana dizinine robots.txt adıyla yükleyin.
Robots.txt Oluşturucu Ne İşe Yarar?
Robots.txt dosyası, Google, Bing veya Yandex gibi arama motorlarının sitenizde hangi klasörleri (örneğin admin paneli, üye sayfaları veya sistem klasörleri) tarayabileceğini belirler. Doğru bir robots.txt dosyası, sitenizin tarama bütçesini optimize eder.
Faydaları
- Arama motorlarının hassas klasörleri taramasını engeller
- Googlebot tarama bütçesini korur
- Site haritası konumunu botlara bildirir
- Hatalı dizinlenmelerin önüne geçer
Sık Sorulan Sorular
Robots.txt dosyası nereye yüklenmelidir?
Robots.txt dosyası web sitenizin kök dizinine yüklenmelidir. Örneğin: domainadi.com/robots.txt şeklinde erişilebilir olmalıdır.
Disallow kuralı kesin engelleme sağlar mı?
Disallow kuralı arama botlarına o sayfaları taramamalarını söyler. Ancak sitenizin şifreli veya gizli sayfaları için robots.txt yerine meta-noindex veya şifreli koruma kullanmalısınız.
Kullanıcı Yorumları & Değerlendirmeler
Bu araç hakkındaki deneyiminizi paylaşın.
İlk yorumu siz yaparak diğer kullanıcılara yardımcı olun.