Site Sahibi Facebook Profili...
COUNTER-STRİKE CS-İCİN-HERSEY.TR.GG
ROBOTS.TXT NEDiR
Robots.txt nedir ne işe yarar ?Robots.txt arama motorlarına yol göstermek için kullanırız.Arama motorları sitenize geldiğinde ilk aradığı ona yol göstericek olan robots.txt dosyasıdır.Robots.txt içerisine yerleştireceğimiz komutlar ile arama motorlarına hangi sayfaları indexlemesi gerektiğini ve hangi klasörleri - sayfaları engellemesi gerektiğini söyleceyeğiz.
Arama Motorlarına yol göstermek için belirtmemiz gereken komutlar şöyledir.
User-agent: * Disallow:
Yukardaki " User-agent " arama motoru örümceğimizi belirtir. User-agent karşısındaki " * " işareti ise bütün arama motorları için geçerli olduğunu belirtir istediğimiz taktirde " * " işareti yerine " Googlebot " komutunuda girebiliriz fakat bu sefer siteinizi Googlebot'dan başka arama motorları (botları) ziyaret etmeyecek indexlemiyecektir.
Disallow: İşlevleri & Görevleri
Disallow: komutumuz ise görevi arama motorlarının belirlediğiniz sayfayı engellemektir.Kısaca Disallow komutu yanına (karşısına) " / " işaretini koyup indexlenmesini engellemek istediğiniz sayfayı belirtirseniz o sayfa gelen arama motorları tarafından indexlenmeyecektir.
Örnek verelim;
User-agent: * Disallow: /shady08.html
Eğerki birden fazla engellenmesini istiyorsanız hemen tekrar altına yeni bir Disallow komutu girmeniz gerekmektedir.
Onuda bir örnekle gösteriyim daha iyi anlaşılır.
User-agent: * Disallow: /shady08.html Disallow: /test.html Disallow: /kontrolpaneli.php
Evet daha önce anlatmış olduklarım ve vermiş olduğum örnekler kök dizindeki (ana dizindeki) engelleme işlemleri idi.Şimdi ise herhangi bir klasörümüzü ve klasörümüzün içindeki sayfayı engellemeyi göstereceğim.
Disallow ile klasörü arama motorlarına engelleme komutu;
User-agent: * Disallow: /shady08/
Disallow ile klasörümüzün içerisindeki bir sayfayı arama motorlarına engelleyelim
User-agent: * Disallow: /shady08/test.html
Webmasterların düşünerek ve emin bir şekilde sitelerine gelecek olan arama motorlarına (örümceklere) yol göstermelilerdir.Robots.txt dosyasını herhangi bir metin belgesi açıp içerisine komutları yerleştirip sitenizin kök dizinine yerleştirin.
Makale Sahibi: Ender CENGİZ
Bugün 26 ziyaretçi (158 klik) Kişi Burdaydı.
