robots.txt nedir?
robots.txt, arama motoru botlarına sitenin hangi bölümlerini taramaması gerektiğini söyleyen dosyadır. Shopify bu dosyayı otomatik oluşturur; gerektiğinde robots.txt.liquid şablonuyla düzenlenebilir.
Shopify mağazalarında robots.txt varsayılan olarak hazırdır: sepet, ödeme, hesap ve arama sonuçları gibi taranmasına gerek olmayan sayfalar engellenmiştir ve site haritasının adresi dosyada yer alır. Çoğu mağaza için varsayılan ayar yeterlidir.
Ne zaman düzenlenir?
- Filtre veya sıralama parametreli binlerce URL taranıyorsa
- Uygulamaların oluşturduğu gereksiz sayfalar dizinde görünüyorsa
- Belirli bir botun erişimi sınırlandırılmak isteniyorsa
Nasıl düzenlenir?
Tema kodunda templates/robots.txt.liquid şablonu oluşturulur ve Shopify'ın varsayılan kurallarına ek kurallar yazılır. Varsayılan kuralları tamamen silmek önerilmez.
robots.txt ile bir sayfa Google'dan kaldırılır mı?
Hayır. robots.txt taramayı engeller, dizinden kaldırmayı garanti etmez. Bir sayfanın dizinde görünmemesi isteniyorsa noindex etiketi kullanılmalıdır.
Projenizi konuşalım.
Mevcut mağazanızı, hedefinizi ve zaman planınızı yazın; kapsamı birlikte netleştirelim.