Arama Motorlarının İndexlemesini İstemediğimiz Klasör Veya Dosyalar

Sitenizi yüklediğiniz sunucunun ana klasöründe robots.txt dosyası oluşturun ve içine aşağıda belirttiğim kodları ekleyin
User-Agent: *
Disallow:/Css/
Disallow:/kayit.html

Bu kodların anlamı şu User-Agent: * koduyla
tüm arama motorlarına izin verdiğimizi belirtiyoruz.
Disallow:/Css/  koduyla
sitenizin bulunduğu ana dizindeki Css adlı klasörü indexlenmesini istemediğinizi belirtiyorsunuz.
Disallow:/kayit.html  bu kod ise
kayit.html dosyasını indexlenmesin diyorsunuz fakat bu dosya anadizin de ise
Peki ya alt klasör ve dosyalarda indexleme istemiyorsak ?
O zaman da kodu şöyle değiştirin mesela admin klasöründeki css klasörünün indexlenmesini istemiyorsunuz
Disallow:/admin/css/ şeklinde yazmanız yeterli olacaktır.
Aynı mantık dosyalar için de mevcut admin klasöründeki kayit.html indexlenmesin istiyorsanız 
Disallow:/admin/kayit.html  şeklinde ayarlamanız yeterli.  Hayırlı Çalışmalar


Bilim insanının gayesi doğruyu öğrenmekse, kendini okuduğu her şeye düşman etmelidir.

En Son Yapılan Yorumlar