Merhaba arkadaşlar bu yazımda sizlere robots.txt nedir ve bu dosya nasıl ayarlamalıyız anlatmaya çalışacağım.

Bir önceki yazıma bak, faydalı olabilir 🙂

C Class IP Nedir ? ve SEO İçin Neden Önemlidir ?

https://eniyilerde.com

Ve WordPress Temaları İşine yarayabilir.

WordPress Film,Program Paylaşım ve Birçok Tema


https://eniyilerde.com

Robots.txt bir metin dosyasıdır Sayfaları arama motorlarına söylemek ve tanıtmak için sitenizin ana dizininde bulunan .txt uzantılı bir dosyadır. Yani Robots.txt arama motorlarının sitenizi tanıması için zorunlu olduğu anlamına gelir.

Robots.txt sitenizi arama motorlarının tanımasına engelleyecek dosyaları es geçerek güzel bir yol netleştirmek için önemlidir ve bir robots.txt dosyası koymak harita gibi bir şeydir.

Ayrıca

Robots.txt’nin konumu çok önemlidir. Aksi takdirde kullanıcı arayüzlerinin (arama motorları) bulmak mümkün olmayacaktır çünkü ana dizinde olmalıdır -Sitenizde robots.txt adlı bir dosya olmalıdır adı değişik olmamalıdır. Bunun yerine, botlar ( ana dizinde ilk bakacakları yer siteadı/robots.txt ) ve robots.txt dosyası olmadığını varsayalım ve bu nedenle onlar yol boyunca ana dizinde robots.txt  ararlar.

Robots.txt Dosyasının içeriği Disallow kullanarak index istemediğiniz yeri belirleyebilirsiniz Disallow kullandığınızda arama motoru indexlemeyecek ve arama botlar girmeyecektir.

Robots.txt Nedir ? Ne İşe Yarar ? Robots.txt ayarları
Robots.txt Nedir ? Ne İşe Yarar ? Robots.txt ayarları


Örnek ana dizinde bulunan robots.txt dosyası

User-agent: *
Disallow: / temp /
User-agent: Googlebot
Disallow: / images /
Disallow: / temp /
Disallow: / cgi-bin /

Sitenizi indexlenmeye kapatmak için komut:

User-agent: *
Disallow: /

Sitenizdeki belli bir resmin Google görsel aramalarında yer almasını engellemek için..

User-agent: Googlebot-Image
Disallow: /resimler/profilim.jpg

Sitenizdeki hiç bir resmin Google görsel aramalarında yer almamasını istiyorsanız,işte komutunuz;

User-agent: Googlebot-Image
Disallow: /

Sitenizdeki sadece belli sayfaların gözükmesini engellemek için ise şu eklemeyi kullanabilirsiniz;

User-Agent: *
Disallow: /ozel-dosya 

eniyilerde.com sitesinin robots.txt dosyası;

User-Agent: *
Allow: /wp-content/uploads/
Disallow: /wp-content/plugins/
Disallow: /readme.html

Sitemap: https://eniyilerde.com/sitemap_index.xml

Bu yazımı okuduğunuz için teşekkürler yorum yaparak siteye destek olabilirsiniz. Destek verenlere şimdiden teşekkürler.

Ayrıca merak ettiğiniz yerleri iletişim kısmından ve yine yorum kısmından sorarak cevap isteyebilirsiniz.

Yazılarınızı yüzlerce kişinin okumasını istiyorsanız sitemize üye olablirsiniz aynı zamanda eğlenceli testler, listeler, hikayeler ve görseller oluşturabilirsiniz.

eniyilerde.com olarak bizi takip ettiğiniz için teşekkürler.


Sizin Tepkiniz Nedir?

Sinirlendim Sinirlendim
0
Sinirlendim
Şaşırdım Şaşırdım
0
Şaşırdım
Başarısız Başarısız
0
Başarısız
HMM HMM
0
HMM
Aşık oldum Aşık oldum
0
Aşık oldum
Güldüm Güldüm
0
Güldüm
OMG OMG
0
OMG
Başarılı Başarılı
0
Başarılı

Facebook Yorumları

yorum

2 Comments

E-posta hesabınız yayımlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir

error:
Bir format seç
Serbest Yazı
Görseller, videolar ve bağlantılar kullanarak bir yazı oluştur.
Basit Test
Bilgiyi kontrol etmek isteyen doğru ve yanlış cevaplı sorular oluştur.
Kişisel Test
Kişisel bir şey ortaya koymayı amaçlayan sorular oluştur.
Liste
İlgi Çekici Bir Liste Oluştur
Oylanabilir Liste
Upvote or downvote to decide the best list item
Açık Liste
Submit your own item and vote up for the best submission
Anket
Bir şeye karar verme ya da görüş belirlemek için oylama içeriği oluştur.
Video
Youtube, Vimeo veya Vine Kodları