WordPress Robots.txt Nedir?

WordPress Robots.txt dosyası sitenizin Search Enine Result Pages ekranlarında daha iyi şekilde görüntülenmesi için büyük bir önem taşımaktadır.  Arama motorları tarafından kullanılan botların işini kolaylaştırarak, onları en çok görünmesini istediğiniz sayfalara yönlendirmenize olanak tanımaktadır.

Kullanıcılar için yeni bir site oluşturulduğu zaman arama mtorları botlar göndererek gerekli taramaları yaparak, her sayfanın bir haritasını oluşturmaktadır. Böylece bir kişi ilgili kelimeler ile arama yaptırdığı zaman hangi sayfaların görüleceği anlaşılmaktadır. Temel seviyede bu bakımdan ldukça kolay bir yapı taşımaktadır.

Asıl sorun çağdaş internet sitelerinin sayfa harici çok daha fazla içermesidir. WordPress örnein kendi dizinlerine sahip olan eklentiler kurma olanağı tanımaktadır.  Kullanıcılar içerikler ile ilgili olmadığı için doğal olarak görünmesini de istememektedir.

WordPress Robots.txt burada devreye girere, arama motorlarına gerekli talimatları vermektedir. Böylece hangi sayfalara girmemesi gerektiğini anlatarak daha verimli bir şekilde kullanmasına olanak tanımaktadır.

WordPress Robots.txt Ne İşe Yarar?

WordPress Robots.txt dosyası olmadan da arama motorları tarafından kullanılmakta olan botlar siteleri taramaktadır. Ancak henüz siteniz tam şekilde hazırlanmamışsa veya hatalı bölümleri yer almaktadır.  Bunların yine de taranması daha kötü şekilde taranmasına yol açmaktadır. Robots.txt dosyası burada devreye girerek istenen çözümleri almayı sağlamaktadır.

Ayrıca bu dosya olmadan site tarayan botların sayısı oldukça fazladır..Bu durum performansı da olumsuz etkilediği için sayfa yükleme hızarı olumsuz bir şekilde etkilenmektedir.

WordPress Robots.txt Konumu

Bir WordPress sitesi oluşturulması ardında nsistem sunucunun ana klasörü içerisinde WordPress Robots.txt dosyası yer almaktadır. Örneğin internetsitesi.com üzerinde ise internetsitesi.com/robots.txt adresini açabilme ve ilgili dosyayı görmek gerekmektedir.

Söz konusu dosya içerisinde User.agent bölümü devamında olan kuralların hangi botlara uygulanacağını anlatmaktadır. Yıldız işareti ise şartların evrensel olup her bota uygulandığı manasına gelmektedir.

Bununla birlikte kişiler kendi dosyaları içerisine daha fazla kural eklemeyi de isteyebilmektedir. Her şeyden önce bunun sanal dosya olduğu anlaşılmalıdır. Root diziniyle konumu genellikle aynı olup çoğunlukla public_html ya da www olarak isimlendirilmektedir.

Ne var ki varsayılan WordPress Robots.txt herhangi bir dizinden erişilebilecek durumda yer almamaktadır.

WordPress Robots.txt Nasıl Olmalı?

WordPress Robots.txt nasıl hazırlanır kapsamında da bilinmesi gereke nbazı konular vardır. Sıradan bir robots.txt oluşturulduğu zaman arama motorları çoğunlukla forumlardaki her bir başlığı endekslemektedir. Formun ne için oldğuna bağlı şekilde kapatmak da istenebilmektedir. Ayrıca farklı kurallar belirlemek de mümkündür.

Örneğin bu kapsamda Bing arama motoru tarafından taranmaya izin vermeyen kuallar koymak da mümkündür. Hangi motorların siteye erişim sağlayacağı ya da sağlayamayacağıböylece belirlenebilmektedir.

Ne var ki unutulmaması gereken konu motorların her zaman bu konuyu takip etmediğidir. Bu bakımdan istisnalar da yer almaktadır. Buna karşılık genellikle takip edildiği için aksatılmadan, doğru bir şekilde hazırlanması gerekmektedir. WordPress Robots.txt kullanımı doğru şekilde yapılırsa en verimli sonuçları teklif edebilmektedir.

WordPress Robots.txt Nasıl Oluştulur?

WordPress Robots.txt oluşturma günümüzde farklı yöntemler kullanılarak yapılabilmektedir. Buun seçeneklerinden biri Yoast SEO kullanmadır. WordPress’in popüler uygulamalarından bir tanesi olup Anahtar Kelimeleri daha iyi bir şekilde kullanmaya olanak tanımaktadır. Bunun yanı sıra kullanımı da oldukça kolaydır.

Eklenti indirilip kurulduktan sonra SEO ve Araçlar bölümününe girilerek Dosya Düzenleyicisi açılmaktadır. Buradan yeni bir yönlendirme yapılmakta olup böylece .htaccess dosyası düzenlenebilmektedir. Create Robots.txt File dosyasına da böylece tıklanabilmektedir. Ardından karşınıza yeni bir editör gelmekte, böylece düzenlemeler de sağlanabilmektedir.

Ancak Yoast SEO’nun kendi varsayılan kurallarını belirlediği, bunun da varolan sanal robots.txt’nin yerini aldığı unutulmamalıdır. WordPress Robots.txt dosyası oluşturma böylece yapılabilmektedir.

All in One SEO Pack

Bu eklenti de tıpkı Yoast SEO gibi yaygın bir şekilde kullanılmaktadır. WordPress Robots.txt oluşturma kapsamında farklı önerier arıyorsanız bunu tercih etmeniz de mümkündür.

Ancak unutulmaması gereken eklenti ile doğrudan bu dosya üzerinde değişiklik yapılamadığıdır. Dosyanın kendisi gri renk alarak Yoast SEO aksine istediğiniz her şeyi eklemek mümkündür.

FTP

WordPress Robots.txt nasıl oluşturulur FTP üzerinden de yapılabilmektedir. Bunun için bir metin editörü açmanız, ardından da birkaç satır yazmanız gerekmektedr. Siteye bağlantı kurulduktan sonra public_html açılmakta, ardından bilgisayardaki dosyayı sunucuya yüklemek gerekmektedir. Kısa sürmekle beraber ne yapacağınızdan emin değilseniz yapmamanız tavsiye edilmektedir.

Diğer Yazılarımız

• Web tasarım maliyetleri neye göre belirlenir?
  Web tasarım maliyetleri, birçok farklı faktöre bağlı olarak değişiklik gösterir. Bunlar arasında web sitesinin boyutu (sayfa sayısı),
• Neden profesyonel bir web tasarım firmasıyla çalışmalıyım?
  Profesyonel bir Ankara web tasarım firması ile çalışmak, amatör bir yaklaşıma kıyasla birçok avantaj sunar. Profesyoneller,
• Mobil uyumlu (responsive) tasarım neden önemlidir?
  Mobil cihazlardan internete erişimin giderek arttığı günümüzde, web sitenizin mobil uyumlu olması hayati bir zorunluluktur.
• SEO (Arama Motoru Optimizasyonu) web tasarımının neresinde devreye girer?
  SEO, web sitenizin arama motorlarında (Google, Bing vb.) daha görünür olması için yapılan çalışmaların tümünü kapsar.
• Web sitem için hangi içerik yönetim sistemini (CMS) seçmeliyim?
  En popüler CMS platformları arasında WordPress, Joomla ve Drupal yer alır. Hangi CMS’nin sizin için en uygun olduğu,
• Web tasarım süreci ne kadar sürer?
  Web tasarım süresi, projenin karmaşıklığına, sayfa sayısına, istenen özel işlevlere, içerik hazırlık sürecine ve müşteri geri bildirim…
• Avukatlara Özel Web Tasarım
  0 (0) Avukatlara Özel Web Tasarım, Dijital çağ, hayatın her alanında olduğu gibi avukatlık mesleğini de köklü bir şekilde dönüştürmektedir. İnternet, bilgiye erişim ve hizmet arama süreçlerinde merkezi bir konuma yerleşmiş durumdadır. Potansiyel müvekkillerin büyük bir çoğunluğu, hukuki bir sorunla karşılaştıklarında veya hukuki danışmanlık ihtiyacı duyduklarında ilk olarak internete başvurmaktadır. Yapılan araştırmalar, internet kullanıcılarının %93’ünün… Daha fazla okuyun: Avukatlara Özel Web Tasarım
• Eryaman Web Tasarım ve SEO Ajansı
  Profesyonel Eryaman web tasarım ve SEO hizmetleri mi arıyorsunuz? TPK Medya, Etimesgut ofisiyle yerel işletmelere
• Ostim Web Tasarım ve SEO Ajansı
  Ostim Web Tasarım ve SEO Ajansı, kurumsal firmalara özel web tasarım, SEO ve e-ticaret çözümleri sunan profesyonel bir dijital
• WoodMart: WordPress E-Ticaret Teması Kurulumu
  WoodMart: WordPress E-Ticaret Teması Kurulumu