Robots.txt

Robots.txt nedir? ne demek?

Web sitesi geliştiricileri tarafından arama motorları bot (örümcek) yazılımlarına bir web sitesinin hangi sayfalarının taranacağını ve hangilerinin taranmaması gerektiğini bildiren bir txt metin dosyasıdır. 

İnternet Terimleri Sözlüğü İçerisinde Arama

# A B C Ç D E F G H I İ J K L M N O Ö P Q R S Ş T U Ü V Y Z