Wordpress үшін robots.txt файлын қалай жасауға болады

басып шығару · Время на чтение: 6мин · бойынша · Жарияланды · Жаңартылған

ойнауБұл мақаланы тыңдаңыз

WordPress үшін Robots.txt файлын қалай жасауға болады - дұрыс Robots.txt жасауБарлығына сәлем, мен бүгін айтамын Wordpress үшін robots.txt файлын қалай жасауға болады. robots.txt файлын жасау роботтарды іздеу жүйесіне ең алдымен робот сіздің сайтыңыздың қай бөлімдерін айналып өтіп, индекстей алатынын, ал қайсысы болмайтынын көрсету керек.

Шын мәнінде, бұл қызмет файлы іздеу ботына сайттың қай бөлімдері іздеу жүйелерінде индекстелетінін және қай іздеу роботы өткізіп жіберу керектігін көрсету үшін қажет. Бірақ іздеу жүйесі роботтары тыйым салу директивасын елемей, бөлімді индекстей алатынын түсінуіңіз керек. Алайда мұндай жағдайлар өте сирек кездеседі.

Мақаланың мазмұны:

WordPress үшін Robots.txt - мұны қалай жасауға болады?

1. .txt форматында роботтар деп аталатын мәтіндік файл жасаңыз. Кәдімгі мәтіндік редактормен жасалған.

WordPress үшін robots.txt файлын жасаудың мысалы.
2. Одан кейін осы файлға келесі ақпаратты енгізіңіз:

Пайдаланушы-агент: Яндекс Рұқсат етілмейді: /wp-admin Рұқсат етілмейді: /wp-includes Рұқсат етілмейді: /wp-comments Рұқсат етілмейді: /wp-content/plugins Рұқсат етілмейді: /wp-content/themes Рұқсат етілмейді: /wp-content/cache Рұқсат етілмейді: / wp-login.php Рұқсат ету: /wp-register.php Рұқсат ету: */trackback Рұқсат ету: */feed Рұқсат ету: /cgi-bin Рұқсат ету: /tmp/ Рұқсат ету: *?s= Пайдаланушы агенті: * Рұқсат етпеу: /wp- admin Рұқсат етпеу: /wp-includes Рұқсат ету: /wp-comments Рұқсат ету: /wp-content/plugins Рұқсат етпеу: /wp-content/themes Рұқсат етпеу: /wp-content/cache Рұқсат етпеу: /wp-login.php Рұқсат етпеу: /wp- register.php Рұқсат ету: */trackback Рұқсат ету: */feed Рұқсат ету: /cgi-bin Рұқсат ету: /tmp/ Рұқсат ету: *?s= Хост: site.com Сайт картасы: http://site.com/sitemap.xml

3. Host: site.com (site.com) директивасын сайтыңыздың атымен ауыстырыңыз.
4. Сайт картасы директивасында мынаны көрсетіңіз: сайт картасына толық жол. URL мекенжайы сайтыңыздағы картаны жасайтын плагинге байланысты әр түрлі болуы мүмкін.
5. robots.txt файлын сайтыңыздың түбірлік қалтасына сақтаңыз және жүктеңіз. Мұны кез келген FTP клиентімен жасауға болады.
6. Тамаша, файлыңыз дайын және жұмыс істейді. Енді сайтты тексермес бұрын іздеу жүйесінің роботтары алдымен осы қызметтік файлға қол жеткізеді.

robots.txt файлын декодтау (директивалар)

Енді Robots.txt файлын толығырақ қарастырайық. robots.txt файлына нені және не үшін қостық.
пайдаланушы-агент - директивалық, іздеу роботының атын көрсету үшін қажет. Оның көмегімен іздеу роботтарының сайтыңызға кіруіне тыйым салуға немесе рұқсат беруге болады. Мысалға:

Біз Яндекс роботына кэш қалтасын қарауға тыйым саламыз:

Пайдаланушы агенті: Yandex
Рұқсат етпеу: /wp-content/cache

Bing роботына тақырыптар қалтасын (сайт тақырыптарымен) шолуға рұқсат етеміз:

Пайдаланушы агенті: bingbot
Рұқсат етіңіз: /wp-content/themes

Біздің ережелеріміз барлық іздеу жүйелері үшін біркелкі әрекет етуі үшін. Директиваны пайдаланыңыз: Пайдаланушы-агент: *

Allow and Disallow – рұқсат ету және тыйым салу директивасы. Мысалдар:

Яндекс ботына wp-admin қалтасын көруге рұқсат беріңіз:

Пайдаланушы агенті: Yandex
Рұқсат етіңіз: /wp-admin

Барлық боттардың wp-мазмұн қалтасын көруіне жол бермеу:

Пайдаланушы-агент: *
Рұқсат етпеу: /wp-content

Бұл robots.txt рұқсат беру директивасын пайдаланбайды, біз тыйым салу директивасы арқылы тыйым салмайтын нәрсеге әдепкі бойынша рұқсат етіледі.

  • Хост - директива, сайттың негізгі айнасын көрсету үшін қажет, ол робот арқылы индекстеледі. Үшінші тараптың барлығынан бас тартылмайды.
  • Сайт картасы - мұнда біз сайт картасына жолды көрсетеміз. Сайт картасы веб-сайтты жылжытудың өте маңызды құралы екенін ескеріңіз! Оның болуы өте маңызды, бұл туралы ұмытпаңыз.

Менің веб-сайтыма арналған кеңейтілген Robots.txt файлының мысалы

Енді менің сайтымның роботтар файлын қарастырайық. Тыйым салу немесе рұқсат ету директивасын өз қажеттіліктеріме сәйкес өңдейтінімді ескеріңіз. Егер сіз менің мысалымды пайдалануды шешсеңіз, файлды қарап шығыңыз және қажет емес директиваларды алып тастаңыз.

robots.txt файлының мысалы, жеке сайт.

Осы сайттың robots.txt файлын алайық:

# robots.txt User-Agent: * Рұқсат етпеу: /wp-json/ # техникалық ақпарат Рұқсат етпеу: /wp-login.php # қауіпсіздігі Рұқсат етпеу: /wp-register.php # қауіпсіздігі Рұқсат етпеу: /xmlrpc.php # қауіпсіздігі, WordPress API file Disallow: / template.html #техникалық ақпарат Рұқсат етпеу: /wp-admin #security рұқсат бермеу: */бақылау #көшірмелер, пікірлер Рұқсат етпеу: */пікірлер* #көшірмелер, пікірлер Рұқсат етпеу: *түсініктемелер_* Қабылдамау: *пікірлер_* #бұзу, сайт іздеу нәтижелері беттері Рұқсат етпеу : /автор /* # авторы мен пайдаланушы беттері Рұқсат етпеу: /пайдаланушылар/ Рұқсат етпеу: /*?replytocom # snotty индекс Рұқсат ету: /*?replytocom* Рұқсат етпеу: /comment-page* # түсініктеме беттері Рұқсат етпеу: /wp-content/cache қалта Рұқсат етілмейді: */тег /* #tags - қажет болса, Рұқсат етілмейді: /тег/* Рұқсат етілмейді: */embed$ #all ендірілгендер Рұқсат етілмейді: */?s=* #search Рұқсат етілмейді: */?p=* #searchx= * #search рұқсат бермеу: */ ?xs_review=* #pages пост өңдегіші, визуалды алдын ала қарау Рұқсат етпеу: /?page_id=* #pages бет өңдегіші, визуалды алдын ала қарау Рұқсат ету: */feed 1TP31Ұзын арналар және rss арналары Рұқсат етпеу: */?rss Рұқсат етпеу: *.php #техникалық файлдар Рұқсат етпеу: /ads.txt # техникалық жарнама беттері, қажет болса, Рұқсат етпеңіз: */amp # барлық күшейткіш беттер - технологияны пайдалансаңыз, өшірмеңіз. Рұқсат етпеу: */amp? Рұқсат етпеу: */amp/ Тығыздамау: */?amp* Тығыздамау: */стиль кестесі 1TP31Шыққан кейбір стиль кестелері Рұқсат етілмейді: */стиль кестесі* Рұқсат етілмейді: /?customize_changeset_uuid= #Кэштеу және қысу плагинінің техникалық көшірмелері Рұқсат етілмейді: *_changeautocustomu =қосу
# сайт беттерін дұрыс көрсету үшін қажет файлдарды боттарға көрсетеді. Рұқсат ету: /wp-content/uploads/ Рұқсат ету: /wp-includes Рұқсат ету: /wp-content Рұқсат ету: */жүктеп салулар Рұқсат ету: /*/*.js Рұқсат ету: /*/*.css Рұқсат ету: /wp-*.png Рұқсат ету: /wp-*.jpg Рұқсат ету: /wp-*.jpeg Рұқсат ету: /wp-*.gif Рұқсат ету: /wp-admin/admin-ajax.php
1TP31Боттарға кескіндері бар қалталарды қарау рұқсаты Пайдаланушы-агент: Googlebot-Image рұқсат беру: /wp-content/uploads/ Пайдаланушы-агент: Яндекс-суреттерге рұқсат ету: /wp-content/uploads/ Пайдаланушы-агент: Mail.Ru-Images рұқсат беру : /wp-content/uploads/ User-агент: ia_archiver-Images Рұқсат етеді: /wp-content/uploads/ Пайдаланушы-агент: Bingbot-Images Рұқсат етеді: /wp-content/uploads/
1TP31 Негізгі айна мен сайт картасын көрсетіңіз Хост: https://nicola.top Сайт картасы: https://nicola.top/sitemap_index.xml

Қорытынды

Мен WordPress үшін robots.txt файлын қалай жасау керектігі туралы егжей-тегжейлі айттым. Бұл файлға енгізілген барлық өзгерістер біраз уақыттан кейін көрінетінін ескеріңіз. Әртүрлі CMS жүйесінде сайт үшін robots.txt файлын қалай жасауға болатыны туралы мақалада ең толық шолуды көре аласыз.

Директиваларды қажеттіліктеріңізге қарай өңдеңіз. Бұл қызметтік файлға барлығын ойланбастан енгізудің қажеті жоқ. Мұндай жауапсыз өзгерістер іздеуден сайттың маңызды беттерін немесе бөлімдерін жоғалтуға және толығымен алып тастауға әкелуі мүмкін. Бұл нұсқаулық сізге пайдалы болады деп үміттенемін, сұрақтармен түсініктеме қалдырыңыз.

Осы мақаланы оқу:

Оқығаныңыз үшін рахмет: SEO HELPER | NICOLA.TOP

Бұл пост қаншалықты пайдалы болды?

Бағалау үшін жұлдызшаны басыңыз!

Орташа рейтинг 5 / 5. Дауыс саны: 169

Әзірге дауыс жоқ! Осы жазбаға бірінші болып баға беріңіз.

Сізге де ұнауы мүмкін...

Пікір үстеу

Э-пошта мекенжайыңыз жарияланбайды. Міндетті өрістер * таңбаланған

он алты + он тоғыз =