wordpress için robots.txt nasıl yapılır

Bu makaleyi dinle

Herkese merhaba bugün anlatacağım wordpress için robots.txt nasıl yapılır. robots.txt dosyası oluşturma öncelikle arama motoru robotlarına sitenizin hangi bölümlerini atlayıp indeksleyebileceğini ve hangilerini ekleyemeyeceğini belirtmek gerekir.

Aslında bu servis dosyası, arama botuna sitenin hangi bölümlerinin arama motorlarında indeksleneceğini ve hangi arama robotunun atlaması gerektiğini belirtmek için gereklidir. Ancak, arama motoru robotlarının yasaklama yönergesini göz ardı edip bölümü dizine ekleyebileceğini anlamalısınız. Ancak, bu tür durumlar oldukça nadirdir.

Makalenin içeriği:

• robots.txt dosyası oluşturma
• robots.txt dosyasının kodunu çözme (yönergeler)
• Sitem için genişletilmiş bir Robots.txt dosyası örneği

WordPress için Robots.txt - nasıl yapılır?

1. .txt biçiminde robots adlı bir metin dosyası oluşturun. Normal bir metin editörü ile oluşturulmuştur.

2. Ardından, bu dosyaya aşağıdaki bilgileri girin:

Kullanıcı Aracısı: Yandex İzin Verme: /wp-admin İzin Verme: /wp-includes İzin Verme: /wp-comments İzin Verme: /wp-content/plugins İzin Verme: /wp-content/themes İzin Verme: /wp-content/cache İzin Verme: / wp-login.php İzin Verme: /wp-register.php İzin Verme: */trackback İzin Verme: */feed İzin Verme: /cgi-bin İzin Verme: /tmp/ İzin Verme: *?s= User-agent: * İzin Verme: /wp- admin İzin verme: /wp-includes İzin verme: /wp-comments İzin verme: /wp-content/plugins İzin verme: /wp-content/themes İzin verme: /wp-content/cache İzin verme: /wp-login.php İzin verme: /wp- register.php İzin Verme: */trackback İzin Verme: */feed İzin Verme: /cgi-bin İzin Verme: /tmp/ İzin Verme: *?s= Ana Bilgisayar: site.com Site Haritası: http://site.com/sitemap.xml

3. Host: site.com (site.com) yönergesini sitenizin adıyla değiştirin.
4. Site Haritası direktifinde şunu belirtin: site haritanızın tam yolu. URL, sitenizdeki haritayı oluşturan eklentiye bağlı olarak farklılık gösterebilir.
5. robots.txt dosyasını kaydedin ve sitenizin kök klasörüne yükleyin. Bunu herhangi bir FTP istemcisi ile yapabilirsiniz.
6. Harika, dosyanız hazır ve çalışıyor. Artık arama motoru robotları siteyi taramadan önce ilk olarak bu servis dosyasına ulaşacak.

robots.txt dosyasının kodunu çözme (yönergeler)

Şimdi Robots.txt dosyasına daha detaylı bakalım. Robots.txt dosyasına neyi ve neden ekledik?
kullanıcı aracısı - yönerge, arama robotunun adını belirtmek için gereklidir. Bununla, arama robotlarının sitenizi ziyaret etmesini yasaklayabilir veya izin verebilirsiniz. Örneğin:

Yandex robotunun önbellek klasörünü görüntülemesini yasaklıyoruz:

Kullanıcı aracısı: Yandex
İzin verme: /wp-content/cache

Bing robotunun temalar klasörüne (site temalarıyla) göz atmasına izin veriyoruz:

Kullanıcı aracısı: bingbot
İzin ver: /wp-content/themes

Kurallarımızın tüm arama motorlarında aynı şekilde işlemesi için. Direktifi kullanın: Kullanıcı aracısı: *

İzin Ver ve İzin Verme - izin verme ve yasaklama yönergesi. örnekler:

Yandex botunun wp-admin klasörünü görüntülemesine izin verin:

Kullanıcı aracısı: Yandex
İzin ver: /wp-admin

Tüm botların wp-content klasörünü görüntülemesini engelleyin:

Kullanıcı aracısı: *
İzin verme: /wp-content

Bu robots.txt, Allow yönergesini kullanmaz, Disallow yönergesiyle yasaklamadığımız şeylere varsayılan olarak izin verilir.

• Ev sahibi - yönerge, sitenin ana aynasını belirtmek için gerekli, robot tarafından dizine eklenecektir. Üçüncü şahıslara ait her şeyden vazgeçilmeyecektir.
• site haritası - burada, site haritasına giden yolu belirtiyoruz. Lütfen Site Haritasının web sitesi tanıtımı için çok önemli bir araç olduğunu unutmayın! Varlığı önemlidir, bunu unutmayın.

Sitem için genişletilmiş bir Robots.txt dosyası örneği

Şimdi sitemin robots dosyasına bir göz atalım. Lütfen yasaklama veya izin verme direktiflerini ihtiyaçlarıma göre düzenlediğimi unutmayın. Örneğimi kullanmaya karar verirseniz, dosyayı gözden geçirdiğinizden ve ihtiyacınız olmayan yönergeleri kaldırdığınızdan emin olun.

Bu sitenin robots.txt dosyasını ele alalım:

# robots.txt User-Agent: * İzin verme: /wp-json/ # teknik bilgiler İzin verme: /wp-login.php # güvenlik İzin verme: /wp-register.php # güvenlik İzin verme: /xmlrpc.php # güvenlik, WordPress API dosya İzin Verme: / template.html #teknik bilgiler İzin Verme: /wp-admin #güvenlik İzin Verme: */trackback #duplicates, yorumlar Disallow: */comments* #duplicates, comments : /yazar /* # yazar ve kullanıcı sayfaları İzin verme: /users/ İzin verme: /*?replytocom # snotty index İzin verme: /*?replytocom* İzin verme: /comment-page* # yorum sayfaları İzin verme: /wp-content/cache #cache klasör İzin Verme: */tag /* #tags - uygunsa İzin Verme: /tag/* İzin Verme: */embed$ 1TP31Uzun Gömmeler İzin Verme: */?s=* #search İzin Verme: */?p=* #search İzin Verme: */?x= * #search İzin Verme: */ ?xs_review=* #pages yazı düzenleyici, görsel ön izleme Disallow: /?page_id=* #pages sayfa düzenleyici, görsel ön izleme İzin Verme: *.php #teknik dosyalar İzin Verme: /ads.txt # teknik reklam sayfaları, uygunsa İzin Verme: */amp # tüm amp sayfaları - teknoloji kullanılıyorsa, devre dışı bırakmayın. İzin verme: */amp? İzin verme: */amp/ İzin verme: */?amp* İzin verme: */stylesheet #açılan bazı stil sayfaları İzin verme: */stylesheet* İzin verme: /?customize_changeset_uuid= #önbelleğe alma ve sıkıştırma eklentisinin teknik kopyaları İzin verme: */?customize_changeset_uuid*customize_autosaved =açık

#, site sayfalarının doğru görüntülenmesi için gerekli olan dosyaları botlara belirtir. İzin ver: /wp-content/uploads/ İzin ver: /wp-includes İzin ver: /wp-content İzin ver: */uploads İzin ver: /*/*.js İzin ver: /*/*.css İzin ver: /wp-*.png İzin ver: /wp-*.jpg İzin ver: /wp-*.jpeg İzin ver: /wp-*.gif İzin ver: /wp-admin/admin-ajax.php

1TP31Botların resimli klasörleri görüntüleme izni Kullanıcı aracısı: Googlebot-Image İzin ver: /wp-content/uploads/ Kullanıcı aracısı: Yandex-Images İzin ver: /wp-content/uploads/ Kullanıcı aracısı: Mail.Ru-Images İzin ver : /wp-content/uploads/ Kullanıcı aracısı: ia_archiver-Images İzin ver: /wp-content/uploads/ Kullanıcı aracısı: Bingbot-Images İzin ver: /wp-content/uploads/

1TP31 Ana aynayı ve site haritasını belirtin Ana Bilgisayar: https://nicola.top Site Haritası: https://nicola.top/sitemap_index.xml

Çözüm

WordPress için robots.txt dosyasının nasıl oluşturulacağı hakkında yeterince ayrıntılı konuştum. Lütfen bu dosyada yapılan tüm değişikliklerin bir süre sonra görünür olacağını unutmayın. Çeşitli CMS'lerde bir site için robots.txt'nin nasıl oluşturulacağına ilişkin makalede en eksiksiz genel bakışı görebilirsiniz.

Yönergeleri ihtiyaçlarınıza göre düzenleyin. Bu hizmet dosyasına her şeyi düşünmeden girmenize gerek yok. Bu tür sorumsuzca yapılan değişiklikler, sitenin önemli sayfalarının veya bölümlerinin kaybolmasına ve arama sonuçlarından tamamen çıkarılmasına neden olabilir. Umarım bu rehber sizin için yararlı olur, sorularınızı yorum olarak bıraktığınızdan emin olun.

Bu makaleyi okumak:

• Bir WordPress Sitesine Google Analytics Nasıl Kurulur – Sayaç
• WordPress'te yönlendirme nasıl yapılır?

Okuduğunuz için teşekkürler: SEO YARDIMI | NICOLA.ÜST