Robots.txt Nedir? Nasıl Düzenlenmelidir?
Robots.txt bir çoğumuzun duyduğu bir terim olarak SEO çalışmalarında sıkça karşımıza çıkar. Peki Robots.txt nedir? Robots.txt dosyası web sitelerinin kök dizinlerinde yer almakta olan düz metin dosyasıdır. İçerisinde bir veya…