robotx.txt dosyası oluşturma

Web Sitesi kurduğunuz zaman ilk yapmanız gereken işlerden biriside Sitenize ait bir Robots.txt dosyası oluşturmak olacaktır. Bu sayede arama motorları tarafından daha hızlı index alabilirsiniz ve istemedğiniz linklerinde indexlenmesini engelleyebilirsiniz. Robots.txt Nedir ? Robots dosyası Ana dizinde bulunan normal metin dosyası formatında…