Noindex помощ за Yandex. Когато не можете без noindex и nofollow

В кода изглежда така:

Този атрибут е стандартизиран в HTML, така че всички ботове за търсене правилно го възприемат и следват инструкциите: не скачайте и не предавайте тежестта. Това не прави връзката невидима.

Кога да използвате nofollow

Има много ситуации, в които този атрибут е незаменим. Nofollow се използва, когато е необходимо:

забранете прехвърлянето на тежест към уеб ресурс, който търсачките смятат за некачествен;

управлява броя на връзките, които трябва да бъдат взети предвид от търсачките;

предотвратяване на прехвърлянето на тежест върху множество връзки в коментарите.

Когато използвате nofollow, трябва да знаете мярката, тъй като сайтовете, на които всички връзки са затворени с помощта на този атрибут, не вдъхват доверие в търсачките.

Таговете noindex и nofollow могат да се използват като стойност за атрибута content. Това е необходимо, за да се инструктират роботите в метатага robots, че тази страница не трябва да се индексира или да следва връзките, поставени на нея.

По този начин използването на nofollow или noindex зависи от целите, които трябва да бъдат постигнати. Като такива цели може да има нужда да се скрие част от текста, връзките или да се забрани индексирането на цялата страница. В същото време noindex работи само за Yandex, а nofollow работи за всички търсачки.

Първо, нека започнем с факта, че има няколко фундаментално различни понятия: етикет , rel=”nofollow” атрибут и мета маркер . В тази статия ще разгледаме подробно техните дефиниции и цели.

Какво е етикет

... - маркер, който беше предложен да се използва от търсачките, за да забрани индексирането на съдържанието, което се съдържа в него. Този таг не е включен в официалната спецификация за хипертекстово маркиране на html уеб страници.

Важно: разпознава се само от търсачките Yandex и Rambler. Google не е сред търсачките, които разбират този html таг.

Какво представлява атрибутът rel=”nofollow”.

– стойност, която забранява на търсачките да следват връзка, която използва този атрибут.

По-долу ще бъдат разгледани всички примери за използване на етикета. и атрибута .

маркер noindex и атрибут .

етикет за връзки

Този маркер може да се използва за затваряне на връзки от индексиране. Ето как ще изглежда в кода на страницата:

за връзки

текст на връзката

етикет за съдържание

Този маркер може да се използва и за затваряне на съдържание от индексиране. Има два начина. В кода на страницата ще изглежда така:

за съдържание - вариант 1

за съдържание - вариант 2

Текстът е забранен за индексиране

Но си струва да припомним, че само търсачките Yandex и Rambler разбират този маркер. Неговите свойства не се отнасят за Google. Следователно, ако вашият сайт има нискокачествено съдържание, можете да го затворите по този начин само от роботите на Yandex и Rambler.

rel=”nofollow” за връзки

Този атрибут най-често се използва от SEO, когато искат търсачките да игнорират наличието на изходяща връзка като фактор за прехвърляне на тегло, но връзката все пак ще бъде научена от робота. Ето как изглежда в кода:

текст на връзката

Обикновено това е подходящо, когато връзките се добавят автоматично, например в коментари. Ако не можете или не искате да гарантирате за съдържанието на страниците, към които има връзки от вашия сайт, трябва да вмъкнете . Този атрибут се разбира както от Google ботове, така и от Yandex ботове, а търсачките пишат следното в своите сертификати:

Ако внимателно прочетете информацията на връзките по-горе, вече знаете, че теглото на връзката на nofollow не се прехвърля. Но от практиката можем спокойно да кажем, че наличието на такива връзки в профила на връзките е много полезен и съвсем естествен фактор в очите на търсачките. Но наличието на много изходящи връзки на вашия сайт може да бъде отрицателен фактор, дори ако те са затворени чрез този атрибут.

Трябва ли да използвам rel=”nofollow” за вътрешни връзки

Как да споделите маркер и rel=”nofollow”

Ето примерен код, когато оптимизаторите използват маркера и атрибута rel=”nofollow” едновременно:

"заедно

текст на връзката

Но този метод работи напълно само за роботи на Yandex. Google разбира само >.

Мета маркер

Този мета маркер е зададен към секцията на страницата, която не трябва да се индексира и изглежда така:

Мета маркер

… ...

Същността на стойностите на noindex и nofollow в мета тага остава същата:

Noindex- забранява индексирането на ниво страница (цялото съдържание, което се намира на нея), но не забранява на търсачките да я посещават и да следват връзки, които се използват в съдържанието.

- забранява на роботите за търсене да следват връзки на ниво страница (външни и вътрешни).

Комбинации

Има няколко случая, когато този мета таг се използва на практика. Има различни решения за тези случаи:

1. трябва да се използва, ако не искате страницата да бъде индексирана от търсачките, но роботите могат да следват връзки от тази страница към други. Например, това може да е втората страница с пагинация на сайт като site.com/category/?page=2, която има връзки към следните продукти и не искате тази страница да бъде индексирана от търсачка.
2. прави същото. В този случай ще попречите на търсачката да индексира страницата, но роботите ще могат да я преглеждат и да следват връзките.
3. - забранява индексирането на съдържание на съответната страница, а също така забранява на роботите да следват връзки.
4. - позволява на роботите да индексират страницата и да следват връзките. Няма смисъл да се използва такъв мета маркер, тъй като по подразбиране и без него търсачките имат право да извършват същите действия. Но ако е инсталиран на вашия сайт и няма да ограничавате работата на робота, няма смисъл да го премахвате специално.
5. - позволява индексиране на страницата, но роботът няма да следва връзките, които съдържа.
6. - прави същото - позволява на страницата да бъде индексирана, но роботът няма да следва връзките, които съдържа.

Този мета маркер може да се използва както за Google, така и за Yandex поотделно

Ако трябва да блокирате индексирането на страница само за Google, можете да използвате . Това казва помощта на Google.

Ако затворите от индексиране само за Yandex - . Това също е написано много подробно в помощта на Yandex.

Как да комбинираме meta name="robots" с robots.txt и каква е основната разлика

Някои оптимизатори не разбират разликата между мета маркер и затваряне на съответната страница във файла robots.txt. И двата метода не позволяват на роботите за търсене да индексират страницата на сайта, но все пак има разлика:

Първият позволява на роботите да посетят тази страница, да видят мета тага и да го изключат от индекса или да не го индексират.

Вторият забранява достъпа до страницата и ако изведнъж вече е била индексирана преди, тя може да бъде в индекса на търсачките за дълго време, дори ако я затворите във файла robots.txt, без право на повторно -index, по-късно можете да го видите в търсенето по следния начин:

Следователно за неиндексирани страници можете да използвате някоя от опциите.

Ако страницата вече е индексирана, препоръчително е да се инсталира в секцията мета таг . Това ще го премахне от индекса и ще предотврати повторното му включване.

Ако вашият сайт е изграден на WordPress, безплатният плъгин Yoast SEO ще ви помогне да настроите правилно тези мета тагове. Ето как изглежда:

За да помогне за анализа на наличието на всички тези елементи (и мета тагове, маркери и атрибути) в кода на страниците на сайта, разширението на браузъра RDS bar може:

Като го настроите правилно, ще можете да виждате съдържание, обвито в етикет (ще бъде подчертано):

И с помощта на мета тага :

Сега знаете как да използвате тези методи, за да настроите правилното индексиране на сайта, което може да подобри популяризирането му като цяло.

Нека започнем с обозначаването на различните употреби на noindex и nofollow:

• етикет и атрибут
• Мета тагове И

етикет и атрибут

етикет е HTML маркер, който забранява на Yandex да индексира определена област от страница на уебсайт. За търсачката на Google този маркер не работи; освен това Google изобщо не предвижда възможност за изключване на част от текста на страницата от индекса.

Погрешно схващане №1.Основната грешка на хората, които използват този таг е да вярват, че ако част от някакъв текст се постави между отварящия и затварящия таг , тогава роботът Yandex няма да чете и анализира този текст.

Единственото нещо, което този таг забранява, е поставянето на съдържание в индексната база данни, но това съдържание така или иначе ще бъде прочетено и анализирано от робота.

Пример: Има текст на страница на вашия сайт, който използва директни съвпадения на изречения от други източници на трети страни. Следователно тези предложения намаляват уникалността на вашия текст и вие се нуждаете от 100% уникалност. Решавате да затворите тези оферти с етикета така че Yandex да счита вашия текст уникален. Това е заблуда.

Абсолютно целият текст на вашата страница ще бъде прочетен и обработен от робота и той ще знае, че текстът на вашата страница не е уникален.

Същността на етикета - „не индексирайте“, означава, че няма забрана за четене.

Да приемем, че робот е кацнал на вашата страница и е започнал да обхожда съдържанието ви. В един момент роботът намира отварящ етикет , което е сигнал към робота - не индексирайте текста допълнително. Но за да намерите мястото в кода, където е етикетът е затворен, роботът трябва да прочете съдържанието, което идва след отварянето на този таг. Следователно, дори теоретично, е невъзможно да се попречи на роботите да четат съдържание с помощта на тага .

Тогава за какво е етикетът? ?

Той е необходим директно, за да се забрани на робота да издава каквато и да е информация при издаването на своята търсачка. Това могат да бъдат например контакти, които по някаква причина не трябва да се показват в резултатите от търсенето.

Погрешно схващане №2.Друго погрешно схващане, което често се среща сред собствениците на сайтове, е мнението, че връзка е поставена в таг , няма да бъдат взети предвид от търсещия робот. Както казах по-рано, всичко в етикета , ще бъдат прочетени и анализирани от робота Yandex. И връзките не са изключение. Единствената разлика между нормално поставени връзки и връзки в таг - това е, че текстът (котвата) на връзката няма да бъде индексиран.

За да помогне на уеб администраторите, които се нуждаят от робота, все още да не вземат предвид връзките от страници, идва атрибутът, който работи както за Yandex, така и за Google. Когато използвате този атрибут, връзката все още ще бъде проучена от робота и ще бъде направен преход, но без nofollow теглото ще бъде прехвърлено на адресата, а с nofollow теглото ще бъде изгорено.

Пример 1:
Създаване и популяризиране на сайтове

Yandex не индексира котвата, но взема предвид връзката към сайта и прехвърля тежестта върху нея

Пример 2:
Създаване и популяризиране на сайтове

Yandex не индексира котвата и не прехвърля тежестта чрез връзка към сайта

Има два начина да напишете етикет в код:

1.

2. Текстът е забранен за индексиране

Вторият вариант е по-правилен. От етикета не е включено в официалната спецификация на HTML езика за маркиране, тогава присъствието му в кода може да причини объркване сред другите търсачки, които ще считат присъствието му за грешка. За да направите кода на страницата валиден, се препоръчва да използвате коментиран правопис за всички роботи за търсене. Yandex разпознава такъв правопис и други роботи за търсене няма да обърнат внимание на присъствието му.

Мета тагове И

Използването на мета таг noindex в кода на страницата не позволява на Yandex (Google, отново, без да участва в този случай) да индексира цялото текстово съдържание на страницата, докато връзките ще бъдат анализирани изцяло. Тоест, присъствието на този мета таг в кода на страницата не е еквивалентно на затваряне на страницата от индекса в robots.txt.

Наличието на мета маркера nofollow в кода на страницата пречи на търсачките да индексират връзките на страниците. Роботите също няма да следват връзки от страницата, ако присъства този мета маркер. Но ето какво пише в помощта на Yandex:
„Роботът няма да посещава документи, ако те са свързани от страница, съдържаща мета маркер със стойност nofollow, но те могат да бъдат индексирани, ако са посочени без nofollow в други източници“

Обобщаване

етикет ние го използваме само за да забраним на роботите на Yandex да издават информация в резултатите от търсенето.

Ако искаме тежестта на връзката да не се предава на адресата, тогава използваме атрибута nofollow. В същото време не забравяйте, че роботът все още може да следва връзката (ако информация за него е получена от други източници: карта на сайта, връзки) и да анализира страницата, към която се отнася. Методът работи както за Yandex, така и за Google.

Тайните на оптимизацията на сайтове се крият не само в популяризирането им чрез ключови заявки, грижа за използваемостта и увеличаване на трафика, но и в правилното използване на html кода. Правилното прилагане на тагове и техните атрибути често помага да се избегне многодневна работа. Има популярни и ефективни техники. Вероятно при SEO оптимизацията е невъзможно да се отделят атрибутите rel nofollow и маркерът noindex един от друг. Затова тази статия ще обсъди и двете, както и защо са необходими, дали трябва да се поставят един до друг и в какви случаи трябва да се използват и кога не трябва да се прави.

Скриване на връзки от търсачките

Разбира се, всеки сайт се създава, за да се извлече някаква печалба от него. А теглото на всяка страница се оценява от уеб администратора. Но е невъзможно да не публикувате във вашите публикации. Има причини за това и ето няколко от тях:

Купуването и продажбата на връзки носи печалба;

Увеличаване на трафика на уебсайта.

Има мнение, че атрибутът на маркера a - rel nofollow ще помогне да се скрият котвите от роботите за търсене и в същото време теглото на страницата ще бъде запазено. Но това твърдение е възможно само ако кодът е написан правилно. Точното изписване на този атрибут изглежда така:

> котва.

Правилното свързване само придава тежест на сайта и повишава неговото класиране. Излишно е да казвам, че няма нужда да използвате href rel nofollow за вътрешни връзки.

Пример за употреба

Обяснението в общи линии не винаги разкрива пълната картина на важността на използването на определени тагове и техните атрибути. Скрийте връзката, не отдавайте тежестта на страницата на вашия сайт на друг. Какво е това? Просто алчност? Не, това далеч не е вярно. Например, много сайтове имат бутони за социални медии. Съгласете се, че доверието им вече е голямо. Кодовете на социалните бутони със запазване на теглото на собствените им страници се записват с помощта на атрибутите target blank, rel nofollow. Първият от тях, след щракване, ще отведе посетителя към интернет ресурси на трети страни, отваряйки друг раздел на браузъра. Вторият - няма да позволи да се намали теглото на страницата. Например, за бутон за социална мрежа в Twitter ще изглежда така:

a rel=”nofollow”target=”_blank”href=”URL/home/.

Струва си да се спомене валидността на кода - съответствие с всички технически изисквания на html маркирането. Външният маркер nofollow rel не само замества атрибута target_blank не по-лошо, но също така се възприема по-добре от роботите на търсачките.

Rel href nofollow или когато все още имате нужда от него

Скриване от търсачките на връзки към "лоши" или нетематични сайтове;

За да скриете голям брой адреси на ресурси на трети страни;

Скриване на връзки, ако уебмастърът ги продава;

Не прехвърляне на тежестта към мега-популярни портали като Yandex или Google;

Скриване на връзки в коментарите.

Nofollow спасява уебсайтове, и особено блогове, от спам. Непроверените връзки, затворени с този атрибут, ще се появяват все по-рядко в коментарите.

Noindex и защо си струва да говорим за него

Забраната за индексиране може да бъде зададена не само за външни и вътрешни връзки, но и за отделни елементи от текстове, както и цели страници. За да направят това, уеб администраторите използват маркера noindex. Скрива само текстове. Не се отнася за снимки и снимки. Връзки, които rel nofollow успешно скриват, noindex не може да се скрие от търсачките. Роботът няма да види котвите, но ще индексира адресите. Noindex обикновено се използва за скриване на част от съдържанието:

С нецензурни изрази;

С неуникален текст;

Етикетът определено трябва да се използва. Но не работи на всеки двигател. Факт е, че noindex не е валиден, тоест не отговаря на стандартите. Ето защо една от най-популярните платформи за блогове, WordPress, „изхвърля” маркера от своя код. Тайната на валидността се крие в използването на множество знаци.. Като напишете кода в тази форма, можете да сте сигурни, че страниците на блога на Yandex в WordPress няма да бъдат индексирани.

Споделяне

Трябва ли да напиша както маркера, така и атрибута в кода на страницата? Нищо не ви пречи да използвате noindex и rel nofollow заедно. Тагът не пречи на атрибута и обратно. Те са поставени един до друг, защото търсачките виждат кода на сайта по различен начин. Например, когато използва както маркера, така и атрибута, уеб администраторът може да бъде сигурен, че роботът за котва на Yandex няма да го разпознае, нито ще види самата връзка. Google ще види текста, но няма да прехвърли тежестта на страници на трети страни на други сайтове.

Особено за начинаещи

Оптимизацията на уебсайтове е новост на пазара на труда и интересна работа. Липсата на систематично планирани информационни ресурси за новодошлите значително усложнява дейността им. И естествено, младите уеб администратори правят грешки. Някой запълва съдържанието с безумно количество връзки, някой оставя страници без изобщо. Същата картина е в случая с поставянето на тага noindex и атрибута nofollow rel.

Желанието да изведем сайта в ТОП на търсачките е причината за критична грешка. Факт е, че начинаещите често затварят външни връзки както с етикет, така и с атрибут. Това до известна степен наистина спестява тежестта на всяка страница от сайта. Но истината е, че същите външни връзки повишават доверието в търсачките. Можете да компенсирате загубата на тегло, като напредвате по ниско и средночестотни заявки.

Всеки оптимизатор трябва да помни, че всяка информация ще бъде възприета от читателите с голямо доверие, ако е възможно да проследите връзката към нейния източник. Със сигурност самите уеб администратори е малко вероятно да приемат книга или брошура, която не съдържа списък на използваната литература.

Все повече и повече потребители на интернет се ръководят от авторитетни източници. И ако един млад сайт не се позовава на тяхното мнение, тогава ще му бъде много по-трудно да задържи читатели и да привлече абонати. Разбира се, това ще се отрази негативно на оптимизацията на ресурса от Така че струва ли си сляпо да използвате атрибути rel nofollow?

Добрият уебмастър се грижи за своя читател. Не забравяйте, че една от основите на Интернет са връзките към авторитетни ресурси, които предоставят надеждна информация. Сайтовете, създадени за хора, се „харесват“ от търсачките. И теглото на страницата не е единственият параметър, по който страниците със съдържание попадат в ТОП. Според 800 параметъра Yandex оценява интернет проекти.

И в крайна сметка теглото на страниците има значение само за публикации, които са го получили от връзки от сайтове на трети страни. Както показва опитът, донорите, оставяйки този параметър за класиране за себе си, не се издигат по-високо в него в "очите" на търсачките.

За да предотвратите показването на страница в резултатите от търсенето с Google, включете атрибута noindex или заглавката noindex в HTML кода на страницата в HTTP заявката. По време на обхождането Googlebot ще го открие и ще игнорира страницата, дори ако други сайтове имат връзка към нея.

Внимание! Роботът няма да открие директивата noindex, ако страницата блокиранвъв файла robots.txt. Такава страница може да се появи в резултатите от търсенето (например, ако има връзка към друга страница).

Директивата noindex ви позволява да контролирате достъпа до отделни страници на сайта, така че се препоръчва да я използвате, ако нямате достъп до главната директория на сървъра.

Как да добавите атрибута noindex

Има два начина за добавяне на директивата noindex. Техните резултати са еквивалентни, а изборът зависи от това доколко можете да контролирате сървъра и как публикувате съдържание.

етикет

Да блокирам повечето роботи за търсене, добавете следния мета маркер към секцията уеб страници:

Ако искаш блокира достъпа до страницата само за Googlebots, използвайте този код:

Други търсачки могат да интерпретират атрибута noindex по различен начин на страница и да го показват в резултатите от търсенето.

Помогнете ни да открием мета тагове

За да открием мета тагове, трябва да обходим страницата ви. Ако страницата продължи да се показва в резултатите от търсенето, вероятно все още не сме обходили сайта ви след добавяне на маркера. Повторно обхождане на страница от Googlebot може да бъде поискано с помощта на . Друга причина е, че файлът robots.txt блокира този URL от Googlebot и мета маркерът не се открива. За да деблокирате страницата си за Google, трябва да промените файла robots.txt. Това може да се направи с Инструмент за проверка на файлове robots.txt .

HTTP заглавка на отговора

Вместо мета таг, можете да върнете заглавката X-Robots-Tag. Отговорът трябва да бъде noindex или none. Пример за HTTP отговор, при който X-Robots-Tag не позволява на роботите да индексират страницата:

HTTP/1.1 200 ОК (…) X-Robots-Tag: noindex(…)