Bu araç ne işe yarar?
Noindex, nofollow, noarchive, nosnippet ve noimageindex gibi robots header seçeneklerini üretir.
HTTP ve Header Araçları
X-Robots-Tag Header Oluşturucu
PDF, görsel veya özel dosyalar için X-Robots-Tag header çıktısı oluştur.
Online Araç
generator
X-Robots-Tag Header Oluşturucu
Çıktı burada görünür
Nasıl kullanılır?
- allow, disallow ve sitemap değerlerini yaz.
- Robots Oluştur butonuna tıkla.
- Çıkan robots.txt taslağını kontrol et.
- Canlıya almadan önce önemli sayfaları yanlışlıkla engellemediğinden emin ol.
Örnek kullanım
Örnek girdi
allow=/
disallow=/admin/
disallow=/panel/
sitemap=https://digitalgezgin.com/sitemap.xmlÖrnek çıktı
User-agent: *
Allow: /
Disallow: /admin/
Sitemap: https://digitalgezgin.com/sitemap.xmlİpuçları
robots.txt güvenlik duvarı değildir; sadece botlara yönerge verir. Hassas sayfaları gerçek giriş korumasıyla güvenceye al.