# Robots.txt: bu dosya ne işe yarar?

> Robots.txt dosyası, bir sitenin kök dizinine yerleştirilen ve tarama robotlarına (Googlebot, Bingbot…) hangi alanları taramaya yetkili olduklarını, hangilerini olmadıklarını bildiren bir metin dosyasıdır.

- Source canonique : [https://allaux.fr/tr/glossaire/robots-txt](https://allaux.fr/tr/glossaire/robots-txt)
- Langue : TR
- Dernière mise à jour : 2026-09-30

## Bu dosya bir e-ticaret mağazası için neden önemli

Bir e-ticaret sitesi genellikle binlerce teknik URL üretir: sepet sayfaları, sipariş tüneli sayfaları, müşteri hesabı sayfaları veya faset filtre sonuçları (renk, beden, fiyat). Robotlar tüm bu URL'leri ayrım gözetmeden tararsa, siteye ayrılan “tarama bütçesinin” bir kısmını boşa harcarlar ve filtrelerden kaynaklanan yinelenen içerikleri indeksleyebilirler.

Robots.txt dosyası, robotları gerçekten önemli olan sayfalara yönlendirir: kategoriler, ürün sayfaları, editoryal içerikler; sepeti, yönetim panelini veya filtrelerin ürettiği parametreleri ise dışarıda bırakır.

## Somut bir örnek

Dosyaya https://exemple.fr/robots.txt adresinden erişilir ve içinde Disallow: /panier veya Disallow: /admin gibi yönergeler bulunur; bunları genellikle XML site haritasına işaret eden bir Sitemap: satırı izler, bu da arama motorlarının önemli sayfaları keşfetmesine yardımcı olur.

## Engellemek indeksten çıkarmak değildir

> Bir Disallow yönergesi bir URL'nin taranmasını engeller, ancak dış bağlantılar ona işaret ediyorsa indekslenmesini mutlaka engellemez. Bir sayfayı arama sonuçlarından kaldırmak için sadece robots.txt değil, bir noindex etiketi gerekir.

## FAQ

### Robots.txt dosyası tek başına bir sayfanın indekslenmesini engellemeye yeter mi?

Hayır. Taranmasını engeller, ancak engellenmiş bir sayfa başka bir yerde referans gösteriliyorsa yine de sonuçlarda görünebilir. Garantili bir indeksten çıkarma için meta noindex etiketi kullanılmalıdır.

### Robots.txt dosyası nereye yerleştirilmelidir?

Alan adının kök dizinine, asla bir alt klasöre değil; aksi hâlde robotlar dosyayı otomatik olarak kontrol ettikleri standart adreste bulamaz.

### Yönetim paneli robots.txt içinde engellenmeli mi?

İndekste görünmesini önlemek için iyi bir uygulamadır, ancak robots.txt herkesin görebileceği genel bir dosyadır: gerçek bir kimlik doğrulama korumasının yerini asla tutmaz.