🥇 🥇 robots.txt і META робаты: У чым розніца?

1. Відэа Стэнаграма на Robots.txt і Meta Robots Базавы ўзровень [агляд ліпеня 2017]
2. Што такое Robots.txt? [Другі 52]
3. Што такое Robots.txt?
4. Што такое мета - робаты? [Хвіліна 02:00]
5. Што робіць кожны з гэтых цэтлікаў?
6. Практычныя прыклады [Хвіліны 03:00]
7. Робаты Мета-аналіз з Якія крычаць Frog [Хвіліны 04:56]
8. Прыклады Robots.txt [хвіліна 06:26]
10. # 2 - Якія робаты мета камбінацыі вы можаце быць зроблены?
11. # 3 - Так што вялікая розніца паміж robots.txt і мета-робатаў?
12. заключэнне

Колькі разоў у вас задавалася пытаннем, што розніца ў файл robots.txt робатаў мета - тэг? Нягледзячы на ​​тое, падобна, яны маюць розныя функцыі. Сёння Іван торэнт пакіне вельмі ясна, у гэтым відэа.

дзякуючы гэтаму навучанне SEO Вы атрымліваеце веды , каб палепшыць бюджэт сканаванне вашага сайта або час , прызначанае Google сваіх робат для абыходу старонак у Інтэрнэце.

Акрамя таго, відэа паказвае прыклады robots.txt і інструменты , такія як Якія крычаць жабы , з дапамогай якога да аналізаваць секунд робатаў мета тэгі шырокі набор старонак.

Гэта высокае час. Дайце гульню і атрымлівайце асалоду ад!

Відэа Стэнаграма на Robots.txt і Meta Robots Базавы ўзровень [агляд ліпеня 2017]

Вы хочаце, каб усё змесціва пісаць відэа? Тут у вас ёсць і павялічаныя!

Паглядзіце на навучанне, прадстаўленай нашым партнёрам у гэтым відэа, якое мы дадалі некаторыя часта задаюць пытанні і дадзеныя, якія ўзмацняюць навучання ў гэтых ключавых паняццяў у вэб-пазіцыянавання.

SEO Прывітанне сябры! Я Іван Torrente, кансультант Webpositer ў камандзе. У сённяшнім відэа мы навучымся па паляпшэнню бюджэту поўзаць, бюджэт адсочванне пошукавай сістэмы з дапамогай файла robots.txt і metarobots. Наперад!

Што такое Robots.txt? [Другі 52]

Першае, што я тлумачу ў відэа сёння з'яўляецца тое, што robots.txt.

Гэта файл , які вісіць ад кораня нашага дамена, як правіла , імя нашага дамена, robots.txt бара.

Прыклад -> midominio.com/robots.txt

+ INFO:

Файл robots.txt ўяўляе сабой метад , каб прадухіліць боты, што аналізуюць пэўныя вэб - сайты або іншыя робат расследуюць ўсе або частка доступ на сайт, дадаць непатрэбны для пошуку інфармацыі аб выніках.

Robots.txt, таксама вядомы як пратакол выключэнняў для робатаў, уяўляе сабой тэкставы файл , які павінен быць устаўлены ў асноўную тэчку вашага сайта, які закліканы распавесці Google боты , што мы хочам , каб гэтыя URL - адрас індэксуюцца і што мы, хто не і, такім чынам, не захоўваюцца ў базе дадзеных або адлюстроўвацца ў выніках пошуку Google.

Што такое Robots.txt?

Гэты файл служыць для блакавання любога каталога або URL , мы не хочам, які адсочвае пошукавую сістэму і не марнаваць час. Такім чынам, мы эканомім бюджэт адсочванне, вядомы бюджэт поўзаць, быць прысвечаны больш важнымі URL-адрас.

+ INFO:

Выкарыстаньне гэтага файла неабходна , каб пазбегнуць індэксацыі старонак , якія не хочуць Google да ведама, што робіць яго немагчыма адсачыць і таму індэксацыі. Без наяўнасці файла robots.txt, робаты будуць сканаваць ўвесь сайт і праіндэксаваць ўсе URL-адрасы, якія знаходзяцца на іх шляху.

робаты Google , перш чым пачаць адсочваць, шукаць для файла robots.txt для маршруту , якім неабходна прытрымлівацца, так што важна , каб быць ясна , што тыя , файл URL мы хочам індэкса і якія ня.

Тут вы працуеце з дырэктывай Disallow. Гэта можа быць параметризованным, пасвячэнне ці фільтры залежыць. Напрыклад, мы можам блакаваць WordPress WP-адміністратар тыповая, мы можам заблакаваць для PrestaShop распараджэння або фільтруючыся, калі мы дыферэнцыяцыі ў катэгорыях. Усё гэта мы будзем блакаваць, каб пазбегнуць дубляваны кантэнт або URL-адрас.

Гэта важна , каб ведаць , што файл robots.txt з'яўляецца адным з самых чытаных у пошукавай сістэме, так што вы павінны паказаць , дзе ён знаходзіцца карта сайта ,

Мы будзем у ніжняй часткі файла robots.txt, які з'яўляецца звычайна midominio.com/sitemap.xml.

Што такое мета - робаты? [Хвіліна 02:00]

Мета - робатаў з'яўляецца HTML тэг , які звычайна з'яўляецца ў верхняй частцы кожнай старонкі. Кожны URL нашага сайта павінны мець мэта дыферэнцуецца робатаў, у залежнасці ад таго, што нас цікавіць. Яны могуць быць пазначаныя як Няма Index / Індэкс або не прытрымлівацца / Follow.

+ INFO:

Робатаў мета тэг паведамляе Google , якія старонкі нашага сайта не жадаеце іх , каб быць праіндэксаваныя і з'яўляцца ў выніках пошуку.

Ён працуе аналагічна ў файле robots.txt, з асаблівасцю , што робаты мета - тэг і ня дырэктыва індэкс прадухіляе ботаў ад індэксацыі URL у Google, але не поўзаць, а гэта азначае , што Google чытае змесціва і вы ведаеце, што гэтыя старонкі прысутнічаюць, але не, нарэшце, дадаць іх у сваю базу дадзеных.

Адной з асаблівасцяў мета - тэгаў робатаў з'яўляецца тое , што яна дазваляе Google , каб прадастаўляць інфармацыю не толькі пра тых URL - адрасоў , якія вы хочаце праіндэксаваныя ці не, але і на ўнутраныя спасылкі, малюнкі або любога тыпу файла.

Што робіць кожны з гэтых цэтлікаў?

• Індэкс не выкарыстоўваецца для гэтага URL ад індэксацыі.

• Індэкс сам па сабе выкарыстоўваецца для індэксавання , што URL - адрас.

• Выконвайце не выкарыстоўваюцца ня для перадачы паўнамоцтваў па спасылках , якія маюць ўнутраны URL.

• Выконвайце перададзеныя іншаму органу. У кодзе мы будзем гуляць з індэксам і сачыць, як паказана ў гэтым прыкладзе HTML мета робатаў тэг.

• У залежнасці ад нашых інтарэсаў, мы будзем гуляць з рознымі камбінацыямі этыкетак. [Больш падрабязная інфармацыя ў раздзеле Даведкі па Robots.txt і'S Robots Meta]

Практычныя прыклады [Хвіліны 03:00]

Зараз з кампутарам перад мы разгледзім некаторыя практычныя прыклады як robots.txt і робатаў мета-тэгаў.

Вазьміце палатно Zalando.es ў якасці прыкладу і ўбачыць яго зыходны код. Калі націснуць спалучэнне клавіш «Ctrl + F» будзе знайсці робат. Напрыклад, у гэтым выпадку дом павінен індэксаваць, прытрымлівацца. Мы можам зрабіць гэта больш візуальна Google Chrome Extensions для SEO у якасці Seerobots ,

Без таго, каб увесці зыходны код гэта паказвае на тое, што індэкс, Выконвайце на гэтай старонцы.

Мы працуем вялікую частку часу з ScreamingFrog , Адзін з самых магутных інструментаў для мадэлявання , як Google скануе наш вэб - рухавічок.

Вы проста павінны адкрыць Якія крычаць жаба, ўставіць Zalando.es і пачне адсочваць яе ўніз.

мы не будзем чакаць поўнага абыходу кантэнту, таму што гэта бясконцая павуціна, але пакінулі поўзаць некалькі URL-адрасоў, і мы спынімся, каб убачыць, калі мы бачым адрозненне паміж індэксам і індэксам No.

Якія крычаць Frog падзяліць усе, што мы размешчаны слупок і слупок будзе шукаць мета-робатаў. Мы можам узяць на пачатку, калі мы хочам працаваць з ім больш камфортна.

Робаты Мета-аналіз з Якія крычаць Frog [Хвіліны 04:56]

Мы бачым, што робаты мета з'яўляецца на левай, а затым URL.

Такім чынам, мы можам бачыць, якія старонкі часта носяць індэкс Няма мета робатаў тэгаў з'яўляюцца:

Гэтыя старонкі не павінны несці не індэкс , таму што яны не цікавыя для пошукавай аптымізацыі. Тым ня менш, яны павінны мець параметр сачыць , каб перададзеныя спасылкі паўнамоцнага органа.

Напрыклад, у Zalando мы бачым, індэкс якіх няма пэўных катэгорый або памераў, магчыма, таму, што вы выдалілі. Гэта залежыць ад таго, калі ваш сайт, каб мы маглі працаваць у той ці іншай форме.

Калі мы будзем выкарыстоўваць увесь экран у межах Google, я выявіў , што, па сайце: zalando.es Inurl: памер «s, убачыць усе URL - адрас , якія маюць з артыкуламі Zalando памеру S.

Калі мы адкрыем Глядзі Робаты бачым, што паказвае на тое, што старонка не Index, Follow.

Zalando Што ты робіш? Я знайшоў у падрыхтоўцы міні-курс, што гэты тып URL'ами, кладучы Index Не, то не блакаваць іх з дапамогай файлаў robots.txt.

ВАЖНА: Перш чым што - альбо ў файле robots.txt блакавання, павінны быць desindexada. Чаму? Таму што , калі мы перагарадзіць перад устаноўкай Meta Robots Index Не, ён не будзе індэксавацца , таму што Google не будзе мець магчымасць для сканавання і desindexarlo правільна.

Прыклады Robots.txt [хвіліна 06:26]

Паведаміць цікаўны прыклад robots.txt? Каралеўскі дом, я мяркую, што я ведаю. Калі мы паглядзім, мы бачым, што заблакавала г Urdangarín.

Vodafone выкарыстаў яго, каб даць некаторую публічнасць. Робаты даюць некаторую вірусную кропку, то каментар у блогах.

Пытанні і адказы аб robots.txt і METAROBOTS

# 1 - Як файл Robots.txt ствараецца?

Каб стварыць файл robots.txt , можна выкарыстоўваць ноўтбук на вашым кампутары, дзе вы павінны ўставіць кантэнт , які Google будзе паказаць шлях , па якому неабходна прытрымлівацца па ботаў.

• Агент карыстальніка: [назва павук / бот Google]

• Disallow: [каталог або файл]

• Дазволіць: [каталог або файл]

• Карта сайта: [URL XML карта сайта]

Агент карыстальніка ставіцца да ў афіцыйную назву бота Google (Googlebot, Googlebot-вобраз, Googlebot-Mobile і г.д.)

«Disallow» каманда паказвае змесціва , якое мы не хочам , каб быць праіндэксаваныя, у той час як «дазволіць» робіць супрацьлеглае.

І з камандай «карта сайта» пакажа Google адрас старонкі нашага XML карта сайта, дапамагаючы праіндэксаваныя больш хуткі спосаб.

Калі вы хочаце ведаць robots.txt любой сеткі, вам трэба толькі ўвесці адпаведны URL ў суправаджэнні /robots.txt → каманды www.ejemplo.com/robots.txt.

# 2 - Якія робаты мета камбінацыі вы можаце быць зроблены?

З дапамогай робатаў мета-тэг можа выконваць розныя камбінацыі ў залежнасці ад таго, як вы хочаце Google дзейнічаць:

• Індэкс Прытрымлівацца: Гэты шлях вы будзеце распавядаць , што іх Google ботаў , каб поўзаць , а затым індэксаваць старонку →.

• Няма Індэкс Выконвайце: Гэтая камбінацыя прадухіляе індэксацыю , але сачэнне дапускаецца. Гэта найбольш эфектыўны варыянт, калі вы хочаце, каб прадухіліць пэўную старонку з'яўляецца ў выніках пошуку →.

• Індэкс Няма Прытрымлівацца: Дазваляе індэксаванне URL , але ніякіх слядоў. Гэтая камбінацыя рэкамендуецца калі ў вас ёсць старонка са спасылкамі, якія вы хочаце, каб застацца незаўважаным для Google →.

• Няма Індэкс няма Прытрымлівацца: Гэта не перашкаджае як індэксацыі і адсочвання →.

Калі вы працуеце з CMS, мы рэкамендуем выкарыстоўваць убудова, які дазваляе наладзіць яго належным чынам, як SEO або Йоаст SEO Ultimate.

# 3 - Так што вялікая розніца паміж robots.txt і мета-робатаў?

Асноўнае адрозненне паміж тымі двума элементамі з'яўляецца тое , што, у той час як файл robots.txt кажа боты старонка не павінна сканіравацца робаты меты - тэг дазваляе адсочваць старонкі, але не індэксуецца.

У абодвух варыянтах, старонкі павінны быць цалкам нябачным у SERP ад Google, але ў той час як блакаванне з robots.txt як старонкі , і любы уключаны на гэтай старонцы спасылку будзе заблякаваны, калі вы вылучыце для робатаў мета старонкі будуць не індэксуецца , але будзе гэта было прасочана, вынікаючы маршрут спасылкі быў уключаны і перадае значэнне гэтых сувязяў.

Калі мы лічым , што Google належыць на спасылкі для перамяшчэння з аднаго URL у іншы, мы знаходзім відавочнае перавага ў мета - тэгаў робатаў, прапаноўваючы вам магчымасць пазбегнуць індэксацыі старонак , якія вы хочаце , ня становячыся перашкода для пошукавых сістэм, каб адсочваць, калі новыя старонкі.

З з іншага боку, з'яўляецца больш эфектыўным robots.txt паказвае , што робаты мета - тэг пры блакаванні цэлых каталогаў, так як боты ня трэба , каб атрымаць доступ да старонкі , каб высветліць , з'яўляецца Ці ці не прасачыць, што дазваляе значна хутчэй чытаць і ён можа адсочваць большую колькасць старонак за наведванне робатаў.

Ключ да поспеху з'яўляецца веданне таго, як да спалучаць абодва метаду, з дапамогай блакавання з дапамогай файла robots.txt і робатаў мета тэгаў для ўсяго , што падаць робатаў пратакол выключэння не можа ахапіць.

заключэнне

Вось дзве асноўныя канцэпцыі ў вэб - аптымізацыі і дзякуючы ў файле robots.txt , мы можам прадухіліць сканаванне старонкі ў Google бот, але не індэкс. Са свайго боку, робаты мета - тэг робіць прадухіліць індэксаванне URL, але не яго адсочвання прычынай таго, што старонка будзе не з'яўляцца ў выніках пошуку Google.

Таму, хоць абодва варыянту выкарыстоўваецца , каб прадухіліць старонку ад з'яўляцца ў выніках пошуку на асноўныя пошукавыя сістэмы, кожны акт пэўным чынам, таму неабходна ведаць іх прыроду і выбраць лепшую альтэрнатыву , заснаваную на нашых мэтах.

Мы спадзяемся, што і відэа і артыкулы дапамаглі вам убачыць святло ў канцы тунэля гэтыя два паняцці так падобныя, але розныя і ў той жа час.

Любыя сумневы? Пакіньце свае каментары ніжэй.