Hesapatlas LogoHesapatlas Logo
💰 Finans ve Para🏢 Vergi ve Şirket👔 Çalışan ve SGK🎓 Eğitim📅 Tarih ve Zaman❤️ Sağlık ve Spor🏠 Ev ve İnşaat🛒 E-Ticaret ve Satış
💰 Finans ve Para🏢 Vergi ve Şirket👔 Çalışan ve SGK🎓 Eğitim📅 Tarih ve Zaman❤️ Sağlık ve Spor🏠 Ev ve İnşaat🛒 E-Ticaret ve Satış💻 Yazılımcı Araçları📄 PDF Araçları🖼️ Görsel Araçları🔧 Genel Araçlar🏡 Gayrimenkul🚗 Otomobil💼 Kariyer⚙️ Mühendislik📱 Sosyal Medya🔍 SEO Araçları🤖 AI Araçları🧮 Matematik🕌 Dini Hesaplamalar

Robots.txt Oluşturucu

Arama motoru botları için robots.txt dosyası oluşturun.

Sık Sorulan Sorular

Robots.txt nedir?+
Robots.txt, web sitenizin kök dizininde bulunan ve arama motoru botlarına hangi sayfaları tarayıp taramayacaklarını söyleyen bir metin dosyasıdır.
Robots.txt nasıl yazılır?+
User-agent satırıyla hangi bota kural yazıldığı, Disallow ile engellenecek dizinler, Allow ile izin verilen yollar belirtilir. Sitemap URL'si de eklenebilir.
Robots.txt engellemesi indekslemeyi garantiler mi?+
Hayır, robots.txt sadece taramayı engeller. Başka siteler link verirse sayfa indekslenebilir. Tam engelleme için noindex meta etiketi kullanılmalıdır.
Robots.txt hataları SEO'yu nasıl etkiler?+
Yanlış robots.txt ile kritik sayfalar engellenebilir. Düzenli kontrol için Google Search Console'daki URL Denetleme aracı kullanılmalıdır.

Robots.txt Oluşturucu Hakkında

Robots.txt, web sitenizin kök dizininde bulunan ve arama motoru tarayıcılarına (botlarına) hangi sayfaları taraması ya da atlamaması gerektiğini bildiren bir protokol dosyasıdır.

Temel Robots.txt Sözdizimi

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /private/
Sitemap: https://siteadi.com/sitemap.xml

Robots.txt'te Kullanılan Direktifler

  • User-agent: Hangi bota kural uygulandığı (* = tümü)
  • Disallow: Taranmasını istemediğiniz dizin veya sayfalar
  • Allow: Disallow ile engellenen bir dizinde izin verilen alt yol
  • Sitemap: XML sitemap dosyasının URL'si

Robots.txt vs Noindex Farkı

Robots.txt sayfanın taranmasını engeller, ancak dış linkler varsa indekslenebilir. Noindex meta etiketi sayfanın arama sonuçlarında görünmesini kesin olarak engeller. Gizli tutmak istediğiniz sayfalar için her ikisini birlikte kullanın.

Yaygın Robots.txt Hataları

  • Ana sayfayı veya CSS/JS dosyalarını engellemek
  • Tüm siteyi engelleyip yayına almak
  • Sitemap URL'sini eklemeyi unutmak

İlgili Hesaplama Araçları