Robots.txt Nedir ? Ne İşe Yarar ?

Merhaba arkadaşlar bu yazımda sizlere robot.txt dosyasının işlevlerini anlatmaya çalışacağım.

Bir önceki yazıma bak, faydalı olabilir 🙂

C Class IP Nedir ? ve SEO İçin Neden Önemlidir ?

https://eniyilerde.com

Ve WordPress Temaları İşine yarayabilir.

WordPress Film,Program Paylaşım ve Birçok Tema


https://eniyilerde.com

Robots.txt bir metin dosyasıdır Sayfaları arama motorlarına söylemek ve tanıtmak için sitenizin ana dizininde bulunan .txt uzantılı bir dosyadır. Yani Robots.txt arama motorlarının sitenizi tanıması için zorunlu olduğu anlamına gelir.

Robots.txt sitenizi arama motorlarının tanımasına engelleyecek dosyaları es geçerek güzel bir yol netleştirmek için önemlidir ve bir robots.txt dosyası koymak harita gibi bir şeydir.

Ayrıca

Robots.txt’nin konumu çok önemlidir. Aksi takdirde kullanıcı arayüzlerinin (arama motorları) bulmak mümkün olmayacaktır çünkü ana dizinde olmalıdır -Sitenizde robots.txt adlı bir dosya olmalıdır adı değişik olmamalıdır. Bunun yerine, botlar ( ana dizinde ilk bakacakları yer siteadı/robots.txt ) ve robots.txt dosyası olmadığını varsayalım ve bu nedenle onlar yol boyunca ana dizinde robots.txt  ararlar.

Robots.txt Dosyasının içeriği Disallow kullanarak index istemediğiniz yeri belirleyebilirsiniz Disallow kullandığınızda arama motoru indexlemeyecek ve arama botlar girmeyecektir.


Örnek ana dizinde bulunan robots.txt dosyası

User-agent: *
Disallow: / temp /
User-agent: Googlebot
Disallow: / images /
Disallow: / temp /
Disallow: / cgi-bin /

Sitenizi indexlenmeye kapatmak için komut:

User-agent: *
Disallow: /

Sitenizdeki belli bir resmin Google görsel aramalarında yer almasını engellemek için..

User-agent: Googlebot-Image
Disallow: /resimler/profilim.jpg

Sitenizdeki hiç bir resmin Google görsel aramalarında yer almamasını istiyorsanız,işte komutunuz;

User-agent: Googlebot-Image
Disallow: /

Sitenizdeki sadece belli sayfaların gözükmesini engellemek için ise şu eklemeyi kullanabilirsiniz;

User-Agent: *
Disallow: /ozel-dosya 

Bu yazımı okuduğunuz için teşekkürler yorum yaparak siteme destek olabilirsiniz. Destek verenlere şimdiden teşekkürler.

Ayrıca merak ettiğiniz yerleri iletişim kısmından ve yine yorum kısmından sorarak cevap isteyebilirsiniz.

Sitemizde Asp Scriptleri, Php Scriptleri, WordPress Temaları , Blogger ,Temaları , Html Scriptleri ve birçok scripti ücretsiz bir şekilde indirip sitenize kurabilirsiniz. Eniyilerde.com olarak bizi takip ettiğiniz için teşekkürler.

Sending
User Review
0 (0 votes)

Scriptci

Merhaba arkadaşlar, Bu siteyi kurma sebebim insanların istediği scriptleri tek bir site altında ücretsiz bir şekilde bulmasıydı. Ara ara başka sitelerden bulduğum scriptleri, temaları ve programları da bu sitede paylaşmaktayım.

Robots.txt Nedir ? Ne İşe Yarar ?” için bir yorum

Bir cevap yazın

E-posta hesabınız yayımlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir

shares