Ana içeriğe geç
Tools Star Hub
SEO ve Yardımcı Araçlar kategorisi

Robots.txt Oluşturucu

User-agent, allow ve disallow kurallarıyla ve isteğe bağlı sitemap URL’siyle robots.txt metni oluşturun.

Robots.txt Oluşturucu nedir?

robots.txt oluşturucu, yazdığınız kurallardan User-agent, Allow ve Disallow satırları yazar. Bir site haritası URL’si ekleyebilir. Canlı bir siteyi yayımlamaz veya test etmez.

Araç yükleniyor…

Bu araç tarayıcınızda çalışır. Girdiler, dosyalar ve üretilen değerler bu cihazda kalır. Favoriler ve son kullanılan araçlar, kullanırsanız, yerel depolamada yalnızca araç adlarını saklar; asla şifre, belge veya QR içeriği saklamaz. Gizlilik politikası sayfasına göz atın.

Bu araç ne yapar

Bir veya daha fazla user-agent grubundan ve isteğe bağlı bir site haritası URL’sinden robots.txt metni yazın.

Nasıl kullanılır

  1. Bir user-agent girin.
  2. Her satıra bir tane olacak şekilde Allow ve Disallow yolları ekleyin.
  3. İsterseniz bir site haritası URL’si ekleyin.
  4. Oluştur’a basın.

Örnekler

  • Özel bir klasör

    User-agent * ile Disallow: /admin, tarayıcı botlarına /admin altındaki yolları getirmemelerini söyler. Dosya yalnızca metindir.

Temel özellikler

  • Birden fazla user-agent grubu.
  • Birden fazla Allow ve Disallow satırı.
  • İsteğe bağlı mutlak bir site haritası URL’si.

Nasıl çalışır

Her grup User-agent ile başlar, ardından her yol için bir Allow satırı ve her yol için bir Disallow satırı gelir. Boş yol satırları atlanır. Site haritası yalnızca mutlak bir http veya https URL’siyse eklenir. Sayfa dosyayı yüklemez ve canlı bir siteyi test etmez.

İpuçları

  • Tüm botlar için * kullanın.
  • Her yolu ayrı bir satıra yazın.

Sınırlamalar

Sonuç, kopyalayabileceğiniz bir metindir. Kural yayımlamaz ve canlı bir sitenin neye izin verdiğini kontrol etmez.

Bu araçların neleri kapsamadığı için sorumluluk reddi sayfasına bakın.

Sık sorulan sorular

robots.txt dosyası nasıl yazılır?
Bir User-agent satırıyla başlayın, ardından Allow ve Disallow satırları ekleyin. Mutlak bir site haritası URL’niz varsa bir Sitemap satırı ekleyin.
Birden fazla user-agent kullanabilir miyim?
Evet. Her grubun kendi user-agent’ı ve kuralları vardır.
Boş bir yola ne olur?
Boş bir satır atlanır, bu yüzden boş bir Allow veya Disallow kuralı oluşturmaz.
Bu, canlı sitemi test eder mi?
Hayır. Yalnızca metni oluşturur. Dosyayı yayımlamaz ve sitenize istek göndermez.
Hangi site haritası URL’si kabul edilir?
Mutlak bir http veya https URL’si. Protokolü olmayan bir yol reddedilir.
Bu bilgiler sunucuya gönderilir mi?
Hayır. User-agent satırları ve yollar bu sekmede bir araya getirilir. Yüklenmezler ve sayfa sitenize istek göndermez.

İlgili araçlar