Hangisi doğru? Robots.txt mi? Robot.txt mi?
Webmaster dünyasına yeni atılan birçok kişi, bu metin belgesinin fonksiyonunu dahi bilmemektedir. Bilenler ise birçok hata yapmaktadır. Aslında mantıken düşündüğümüzde cevabı kendi kendimize verebiliriz. Örneğin; Google amcanın üzerinde birkaç test yaparak, rahatlıkla doğru olanı öğrenme imkanımız var. Gelin Google amca üzerinde birkaç deneme yapalım…

Browserimizin adres çubuğuna ilk olarak aşağıdaki adresi yazıyoruz:

Alıntı:
Googlerobot.txt
Eğer, doğru dosya adı robot.txt ise, dosya içerisindeki yazıları görebiliriz. Ancak o da ne!

Alıntı:
www.google.com/robot.txt sayfası yok.
Demek ki robot.txt değilmiş. Peki, ne? robots.txt mi? Ona da bakalım:

Alıntı:
Googlerobots.txt
Evet, işte bulduk. Google amca robots.txt kullanıyormuş. Demek ki doğru olan robots.txt imiş.

NOT: robots.txt sadece Google botu için değildir, tüm botlar için geçerlidir.

Kaynak: www.seoteknigi.com