Noindex - etichetă pentru închiderea conținutului din funcțiile de indexare și aplicație. Cum să utilizați corect atributul - Secrete SEO

Să începem prin a defini diferitele moduri de a folosi noindex și nofollow:

• Etichetă si atribut
• Meta etichete și

Etichetă si atribut

Etichetă Este o etichetă HTML care interzice Yandex să indexeze o anumită zonă a paginii unui site. Pentru motorul de căutare Google, această etichetă nu funcționează; în plus, Google nu oferă deloc posibilitatea de a exclude o parte a textului paginii din index.

Concepție greșită # 1. Principala greșeală, oamenii care folosesc această etichetă cred că dacă un text este plasat între etichetele de deschidere și de închidere , atunci robotul Yandex nu va citi și analiza acest text.

Singurul lucru pe care această etichetă îl interzice este plasarea conținutului în baza de index, dar acest conținut va fi citit și analizat de robot în orice caz.

Exemplu: există un text pe o pagină de pe site-ul dvs. care utilizează apariții directe ale propozițiilor din alte surse terțe. Prin urmare, aceste sugestii reduc unicitatea textului dvs. și trebuie să fiți unic 100%. Decizi să închizi aceste oferte cu eticheta pentru a face Yandex să considere textul dvs. unic. Este o iluzie.

Absolut tot textul de pe pagina ta va fi citit și procesat de un robot, iar acesta va ști că textul de pe pagina ta nu este unic.

Esența etichetei - „nu indexați”, ceea ce înseamnă că nu există interdicție de citire.

Să presupunem că un crawler al unui motor de căutare vă vizitează pagina și începe să vă acceseze cu crawlere conținutul. La un moment dat, robotul găsește deschiderea etichetei , care este un semnal pentru robot - nu mai indexați textul. Dar pentru a găsi locul în cod în care eticheta se închide, robotul trebuie să citească conținutul după deschiderea acestei etichete. Prin urmare, chiar și în teorie, nu puteți împiedica roboții să citească conținut folosind eticheta .

Atunci pentru ce este eticheta ?

Este necesar direct pentru a interzice robotului să ofere orice informații în rezultatele motorului său de căutare. Acestea pot fi, de exemplu, contacte care, din anumite motive, nu ar trebui să fie afișate în rezultatele căutării.

Concepție greșită # 2. O altă concepție greșită care apare adesea în rândul proprietarilor de site-uri este opinia că un link plasat într-o etichetă nu vor fi luate în considerare de robotul de căutare. După cum am spus mai devreme, totul în interiorul etichetei , va fi citit și analizat de robotul Yandex. Și link-urile nu fac excepție. Singura diferență dintre linkurile plasate în mod normal și linkurile dintr-o etichetă - aceasta este că textul (ancora) link-ului nu va fi indexat.

În ajutorul webmasterilor care au nevoie ca robotul să ignore link-urile din pagini vine un atribut care funcționează atât pentru Yandex, cât și pentru Google. La utilizarea acestui atribut, linkul va fi în continuare studiat de robot și se va face un clic pe el, dar fără nofollow, greutatea va fi transferată destinatarului, iar cu nofollow greutatea va fi arsă.

Exemplul 1:
Dezvoltarea și promovarea site-ului web

Yandex nu indexează textul ancora, ci ia în considerare linkul către site și trece greutatea de-a lungul acestuia

Exemplul 2:
Dezvoltarea și promovarea site-ului web

Yandex nu indexează textul ancora și nu transferă greutatea de pe link-ul către site

Există două moduri de a scrie o etichetă in cod:

1.

2. Niciun text indexat

A doua varianta este mai corecta. De când eticheta nu este inclusă în specificația oficială a limbajului de marcare HTML, prezența acestuia în cod poate provoca confuzii printre alte motoare de căutare, care vor considera prezența sa ca o eroare. Pentru ca codul paginii să fie valid, se recomandă utilizarea ortografiei comentate pentru toți roboții de căutare. Yandex recunoaște o astfel de ortografie, iar alți roboți de căutare nu vor acorda atenție prezenței sale.

Meta etichete și

Utilizarea metaetichetei noindex în codul paginii interzice Yandex (Google, din nou, în acest caz, nu participă) să indexeze tot conținutul text al paginii, în timp ce linkurile vor fi analizate pe deplin. Adică prezența acestei metaetichete în codul paginii nu este aceeași cu închiderea paginii din indexul din robots.txt.

Prezența metaetichetei nofollow în codul paginii împiedică motoarele de căutare să indexeze link-uri pe pagini. Roboții nu vor urma link-urile din pagină dacă nici această metaetichetă este prezentă. Dar iată ce este scris în ajutorul Yandex:
„Robotul nu va vizita documente dacă sunt legate de pe o pagină care conține o etichetă meta cu o valoare nofollow, cu toate acestea, pot fi indexate dacă alte surse se referă la ele fără nofollow.”

Să rezumam

Etichetă îl folosim doar pentru a împiedica roboții Yandex să ofere informații în rezultatele căutării.

Dacă dorim ca greutatea linkului să nu fie transmisă destinatarului, atunci folosim atributul nofollow. Totodată, nu uitați că robotul poate în continuare să urmărească linkul (dacă informații despre acesta sunt obținute din alte surse: sitemap, linkuri) și să analizeze pagina către care face legătura. Metoda funcționează atât pentru Yandex, cât și pentru Google.

Pentru a preveni apariția paginii în rezultatele căutării Google, inserați atributul noindex sau antetul noindex în solicitarea HTTP în HTML-ul paginii. În timpul accesării cu crawlere, Googlebot o va detecta și va ignora pagina, chiar dacă alte site-uri trimit către aceasta.

Atenţie! Crawler-ul nu va detecta directiva noindex dacă pagina încuiatîn fișierul dvs. robots.txt. O astfel de pagină poate apărea în rezultatele căutării (de exemplu, dacă este legată de o altă pagină).

Directiva noindex vă permite să controlați accesul la paginile individuale ale site-ului, de aceea este recomandat să o utilizați dacă nu aveți acces la directorul rădăcină de pe server.

Cum să adăugați atributul noindex

Există două moduri de a adăuga directiva noindex. Rezultatele lor sunt echivalente, iar alegerea depinde de măsura în care puteți controla serverul și de modul în care publicați conținutul.

Etichetă

A bloca majoritatea roboților de căutare, adăugați următoarea etichetă meta la secțiune pagini web:

Dacă dorești închideți accesul la pagină numai pentru roboții Google, utilizați codul ca acesta:

Alte motoare de căutare pot interpreta diferit atributul noindex de pe o pagină și îl pot afișa în rezultatele căutării.

Ajutați-ne să descoperim metaetichete

Pentru a detecta metaetichete, trebuie să accesăm cu crawlere pagina dvs. Dacă pagina continuă să apară în rezultatele căutării, este posibil să nu fi accesat încă cu crawlere site-ul dvs. după adăugarea etichetei. Re-crawlingul paginii de către Googlebot poate fi solicitat folosind instrumentul. Un alt motiv este că fișierul robots.txt blochează această adresă URL din crawler-ul Google și metaeticheta nu este găsită. Pentru a vă debloca pagina pentru Google, trebuie să vă schimbați fișierul robots.txt. Acest lucru se poate face cu Instrument de inspecție Robots.txt .

Antet răspuns HTTP

Un antet X-Robots-Tag poate fi returnat în locul unei metaetichete. Răspunsul trebuie să fie noindex sau none. Un exemplu de răspuns HTTP în care X-Robots-Tag împiedică roboții să indexeze pagina.

În primul rând, să începem cu faptul că există câteva concepte fundamental diferite: etichetă , rel = atributul „nofollow” și metaeticheta ... În acest articol, vom arunca o privire mai atentă asupra definițiilor și scopurilor acestora.

Ce este o etichetă

... - o etichetă care a fost sugerată a fi folosită de motoarele de căutare pentru a interzice indexarea conținutului conținut în ea. Această etichetă nu face parte din specificația oficială pentru marcarea hipertextului pentru paginile web html.

Important: este recunoscut numai de motoarele de căutare Yandex și Rambler. Google nu este unul dintre motoarele de căutare care înțeleg această etichetă html.

Care este atributul rel = „nofollow”.

rel = „nofollow”- o valoare care interzice motoarelor de căutare să urmărească linkul în care este utilizat acest atribut.

Toate exemplele de utilizare a etichetei vor fi discutate mai jos. iar atributul rel = „nofollow”.

Eticheta Noindex și rel = atributul „nofollow”.

Etichetă pentru link-uri

Această etichetă poate fi folosită pentru a închide link-urile de la indexare. Așa va arăta în codul paginii:

pentru link-uri

textul linkului

Etichetă pentru continut

Această etichetă poate fi folosită și pentru a bloca indexarea conținutului. Există două moduri. În codul paginii, va arăta astfel:

pentru conținut - opțiunea 1

pentru conținut - opțiunea 2

Niciun text indexat

Dar merită să ne amintim că această etichetă este înțeleasă numai de motoarele de căutare Yandex și Rambler. Proprietățile sale nu sunt acoperite de Google. Prin urmare, dacă site-ul dvs. are conținut de calitate scăzută, îl puteți închide în acest fel numai de la roboții de la Yandex și Rambler.

rel = ”nofollow” pentru link-uri

Acest atribut este cel mai des folosit de optimizatori dacă doresc ca motoarele de căutare să nu ia în considerare prezența unei legături de ieșire ca un factor în transferul ponderii, dar legătura va fi totuși studiată de un robot. Așa arată în cod:

rel = „nofollow”

textul linkului

De obicei, acest lucru este adecvat atunci când linkurile sunt adăugate automat, de exemplu, în comentarii. Dacă nu puteți sau nu doriți să garantați conținutul paginilor către care duc link-uri de pe site-ul dvs., ar trebui să introduceți în etichetele unor astfel de link-uri. Acest atribut este înțeles atât de boții Google, cât și de boții Yandex, iar motoarele de căutare scriu următoarele în referințele lor:

Dacă ați citit cu atenție informațiile de pe link-urile de mai sus, acum știți că greutatea nu este transferată printr-un link nofollow. Dar din practică, putem spune cu siguranță că prezența unor astfel de link-uri în profilul link-ului este un factor foarte util și destul de natural în ochii motoarelor de căutare. Dar a avea o mulțime de link-uri de ieșire pe site-ul tău poate fi un factor negativ, chiar dacă sunt închise prin acest atribut.

Trebuie să folosesc rel = ”nofollow” pentru link-urile interne

Cum să partajați o etichetă și rel = „nofollow”

Iată câteva exemple de cod atunci când SEO folosesc eticheta și atributul rel = „nofollow” în același timp:

"de comun acord

textul linkului

Dar această metodă funcționează numai pentru roboții Yandex. Google doar înțelege>.

Metaetichetă

Această metaetichetă este setată în secțiune pe pagina care nu ar trebui indexată și arată astfel:

Metaetichetă

… ...

Esența valorilor noindex și nofollow din metaeticheta rămâne aceeași:

Noindex- interzice indexarea la nivel de pagină (tot conținutul care se află pe aceasta), dar nu interzice roboților de căutare să o viziteze și să urmărească link-urile care sunt utilizate în conținut.

- împiedică roboții de căutare să urmărească link-uri la nivel de pagină (atât externe, cât și interne).

Combinații

Există mai multe cazuri când această metaetichetă este utilizată în practică. Există diferite soluții pentru aceste cazuri:

1. ar trebui folosit dacă nu doriți ca pagina să fie indexată de motoarele de căutare, dar roboții ar putea urma linkurile de la această pagină către altele. De exemplu, aceasta ar putea fi a doua pagină de paginare pe un site precum site.com/category/?page=2 care are link-uri către următoarele produse și nu doriți ca această pagină să fie indexată de motorul de căutare.
2. face la fel. În acest caz, veți împiedica motorul de căutare să indexeze pagina, dar roboții vor putea să o vadă și să urmeze linkurile.
3. - interzice indexarea conținutului pe pagina corespunzătoare și, de asemenea, interzice roboților să urmărească link-uri.
4. - Permite roboților să indexeze pagina și să urmeze linkuri. Nu are sens să folosești o astfel de etichetă meta, deoarece în mod implicit și fără ea, motoarele de căutare au voie să efectueze aceleași acțiuni. Dar dacă este instalat pe site-ul dvs. și nu veți restricționa munca robotului, nu are rost să îl eliminați intenționat.
5. - permite indexarea paginii, dar robotul nu va urma linkurile pe care le contine.
6. - face la fel - permite indexarea paginii, dar robotul nu va urma linkurile pe care le contine.

Această metaetichetă poate fi folosită separat atât pentru Google, cât și pentru Yandex

Dacă trebuie să închideți pagina de la indexare numai pentru Google, puteți utiliza ... Asta spune ajutorul google.

Dacă îl închideți de la indexare numai pentru Yandex - ... Acest lucru este, de asemenea, descris în detaliu în Ajutor Yandex.

Cum să combinați meta name = „roboți” cu robots.txt și care este diferența fundamentală

Unii SEO nu înțeleg diferența dintre o metaetichetă și închiderea paginii corespunzătoare din dosar robots.txt... Ambele metode interzic roboților de căutare să indexeze pagina site-ului, dar există totuși o diferență:

Primul permite roboților să viziteze această pagină, să vadă metaeticheta și să o excludă din index sau să nu o indexeze.

Al doilea interzice vizitarea paginii, iar dacă dintr-o dată a fost deja indexată înainte, poate fi în indexul motoarelor de căutare mult timp, chiar dacă o închideți în fișierul robots.txt, fără drept de reindexare, mai târziu îl puteți vedea la căutare astfel:

Prin urmare, oricare dintre opțiuni poate fi utilizată pentru pagini neindexate.

Dacă pagina a fost deja indexată, este recomandat să o setați în secțiune metaetichetă ... Acest lucru îl va exclude din index și va împiedica intrarea ulterioară în el.

Dacă site-ul dvs. este construit pe WordPress, pluginul gratuit Yoast SEO vă poate ajuta să configurați corect aceste metaetichete. Cam asa arata:

Extensia de browser pentru bara RDS poate ajuta la analizarea prezenței tuturor acestor elemente (și meta-etichete și etichete și atribute) în codul paginilor site-ului:

Configurați-l corect, veți putea vedea conținutul împachetat într-o etichetă (va fi evidentiat):

Și folosind metaeticheta :

Acum știi cum să folosești aceste metode pentru a configura indexarea corectă a site-ului, ceea ce poate afecta mai bine promovarea acestuia în general.

Un articol pentru cei cărora le este prea lene să citească ajutor pe GoogleWebmaster și YandexWebmaster

1. Metaetichetă roboți

Metaetichetă roboți

Pentru a controla comportamentul roboților de căutare pe o pagină web, există o metaetichetă roboți și atributul acesteia conţinut.închiderea unei pagini web de la indexarea căutării,

1. Metaetichetă roboți
2. De ce o metaetichetă robots este mai bună decât un fișier robots.txt

Metaetichetele vă permit să specificați metadate despre o pagină de site. O serie de meta-etichete sunt, de asemenea, folosite de roboții motoarelor de căutare.

Notă. Adesea, metaetichetele descriere și titlu sunt create automat. Se dublează și „nu ușurează căutarea utilizatorilor. Meta-etichetele cu conținut de calitate scăzută pot avea un efect negativ asupra afișarii paginilor site-ului în căutare.

Robotul Yandex se uită la conținutul următoarelor meta-etichete:

• - Poate fi utilizat atunci când se determină relevanța paginii pentru interogările de căutare.
• - Conținutul acestei etichete poate fi folosit în fragmente (descrierile site-ului în rezultatele căutării).

- Folosit pentru adaptarea site-ului pentru dispozitive mobile. Permite controlul zoom-ului ferestrei de vizualizare în browser. Valoarea width = device-width adaptează lățimea ferestrei de vizualizare la ecranul dispozitivului. Valoarea initial-scale = 1 oferă un raport 1: 1 dintre pixelii CSS și pixelii dispozitivului independenți.

Dacă metaeticheta este omisă, browserele mobile afișează în mod prestabilit pagina pentru un ecran de computer. Deoarece lățimea ecranului pe un dispozitiv mobil este semnificativ mai mică decât ecranul unui computer, browserele încearcă să optimizeze conținutul prin creșterea dimensiunii fontului, scalarea conținutului la dimensiunea ecranului sau arătând doar partea din conținut care se potrivește pe ecran.

• - Robotul se poate uita la această etichetă pentru a determina tipul documentului și codificarea acestuia.

- Redirecționează utilizatorul către pagina cu adresa URL specificată după ce utilizatorii rămân N secunde pe pagina curentă. Pentru valorile N mici, este considerată o redirecționare temporară, similară redirecționărilor de server cu codul HTTP 302/303/307.

Robotul Yandex se uită și la aceste metaetichete:

- Vă permite să indexați textul și linkurile de pe pagină, similar cu .

- Interzice indexarea textului paginii.

- Interzice urmarirea link-urilor de pe pagina.

- Interzice indexarea textului și urmărirea legăturilor din pagină, similar cu .

- Interzice afișarea linkului către copia salvată pe pagina cu rezultatele căutării.

- Interzice utilizarea descrierii Yandex.Catalog pentru fragmentul din rezultatele căutării.

În atributul nume, puteți folosi Yandex în locul roboților pentru a specifica directive numai pentru robotul Yandex. De exemplu: \ n

Robotul „nu vizitează documente dacă sunt legate la ele din pagini care conțin o etichetă meta nofollow. Cu toate acestea, ele pot fi indexate dacă alte surse se leagă la ele fără nofollow.

Dacă metaetichetele „nu sunt specificate”, robotul presupune că au valori pozitive (index, follow, archive). Dacă robotul descoperă un conflict de etichetă, alege valoarea pozitivă.

\ n \ n

Există o excepție - atributul all „nu afectează noarchive: \ n

\ n \ n

Elementul noindex

Pentru a interzice indexarea fragmentelor auxiliare ale textului, utilizați etichetă. Această etichetă funcționează în același mod ca metaeticheta noindex, dar se aplică doar textului inclus în etichetă în formatul:

Eticheta noindex nu este sensibilă la imbricare, ceea ce înseamnă că poate fi plasată oriunde în codul HTML al unei pagini. Puteți utiliza eticheta în următorul format dacă este necesar pentru a valida codul site-ului:

textul pe care doriți să-l interziceți de indexare

Atributul rel = \ "nofollow \" al elementului a

Atributul rel = \ "nofollow \" este folosit în etichetă în următorul format:

\ n textul linkului

Atributul funcționează la fel ca metaeticheta cu valoarea nofollow, dar se aplică numai linkului specificat.

Atributul rel = \ "canonic \" al elementului link

Dacă un site are grupuri de pagini cu conținut similar, webmasterul poate specifica adresa preferată (canonică) de utilizat în rezultatele căutării pentru fiecare grup. \ NDe exemplu, o pagină poate fi accesată folosind două adrese:

Www.example.com/pages?id=2www.example.com/blog

Dacă adresa preferată este / blog, aceasta ar trebui să se reflecte în codul paginii / pagini? Id = 2:

La fel, dacă pagina are atributul rel = \ "canonic \" care specifică adresa acestei pagini, robotul o consideră canonică. Această pagină va fi indexată și va apărea în rezultatele căutării Yandex.

Robotul „nu tratează o legătură cu atributul rel = \" canonical \ " ca o directivă strictă, ci ca o opțiune care este luată în considerare și poate fi ignorată.

De exemplu, robotul ar putea să nu folosească adresa specificată de dvs. dacă:

Documentul „nu este accesibil pentru indexare la adresa canonică.

Adresa canonică specifică o adresă URL într-un alt domeniu sau subdomeniu.

Ai specificat mai multe adrese canonice.

De asemenea, nu ar trebui să creați lanțuri de adrese canonice. De exemplu, pentru adresa example.ru/1, adresa canonică este example.ru/2, dar, în același timp, adresa example.ru/2 are adresa canonică exemplu.ru/3.