Indeksiranje stranice - ovo je proces skeniranja, tijekom kojeg tražilica prima informacije o stranicama stranice, njihovim adresama i sadržaju. Indeksiranje obavljaju botovi za pretraživanje (pauci) - posebne programe traženje novih i ponovno provjeravanje starih stranica na internetu. Stranice koje su skenirane i obrađene spremaju se u bazu podataka.
Takva baza se zove " indeks pretraživanja". U toj bazi podataka tražilica traži rezultate koji odgovaraju na upite korisnika.
Važno je razumjeti:
- Ako stranica nije u indeksu pretraživanja, ne može se pronaći u tražilici.
- Svaka tražilica ima svoj indeks pretraživanja, svoje botove za pretraživanje.
- Googleov bot za pretraživanje zove se Googlebot.
Kako provjeriti indeksiranje stranica?
Najviše brz način- upišite naredbu u traku za pretraživanje stranica: [adresa stranice]... Takav pretraga će pronaći sve indeksirane stranice stranice. Da biste vidjeli datum posljednjeg skeniranja stranice, upišite u traku za pretraživanje predmemorija: [adresa provjerene stranice]
Savjet: Usporedite broj indeksiranih stranica sa stvarnim brojem stranica na web mjestu. To će vam pomoći da brzo procijenite ima li vaša stranica problema s indeksiranjem. Na primjer: ako postoji 100 proizvoda na stranici, 10 odjeljaka i 10 informativne stranice(ukupno 120), a u indeksu ima samo 50 stranica, što znači da tražilica nije svjesna većine vaše stranice.
Kako provjeriti indeksiranje cijele stranice
Da biste provjerili indeksiranje stranice, morate slijediti 2 jednostavna koraka:
Kako dodati novu stranicu u indeks tražilice?
Recite tražilici o svojoj web stranici u posebnom Google alat ili Yandex. Podijelite svoju stranicu na društvena mreža ili stvorite vezu na nju s druge, već indeksirane stranice.
Saznajte više o tome kako radi tražilica
Što ako je stranica loše indeksirana?
Da biste riješili probleme, morate detaljnije razumjeti proces indeksiranja. S tehnička točka Sa stajališta, "indeksiranje web-mjesta" se ispravnije smatra dvama odvojenim procesima:
- Skeniranje stranica.
- Obrada stranice.
Kako je stranica indeksirana
1. faza: skeniranje
Indeksiranje ili "puzanje" stranica glavni je zadatak koji obavlja bot za pretraživanje. Uzimajući u nova stranica, bot prima dva skupa podataka sa stranice:
- Sadržaj same stranice, podaci o poslužitelju i servisni podaci. Naime: odgovor poslužitelja, html kod stranice, datoteke css stilovi, skripte, slike.
- Popis poveznica koje se nalaze na stranici.
Primljeni sadržaj prenosi se na daljnju obradu i spremanje u bazu podataka. Skenirane veze također se spremaju poseban popis- “red skeniranja” za daljnju obradu.
Kada bot doda stranicu koja je već u redu u redu za indeksiranje, ta stranica se rangira više na popisu i indeksira brže. Ovo znači to prvi način za ubrzanje skeniranja site - povećati broj poveznica na željene stranice.
Kreiranjem reda za indeksiranje, google bot, kao i drugi botovi za pretraživanje, ispituje kartu web-lokacije i dodaje veze s ove karte u red čekanja. Drugi način poboljšanja indeksiranja- izradite kartu sitemap.xml i prijavite je tražilici.
Postoji nekoliko načina za izradu karte web-lokacije:
- Besplatno online alat za stranice do 500 stranica www.xml-sitemaps.com.
- Program za indeksiranje stranice, s mogućnošću stvaranje mape web mjesta- xenu veze.
- Biblioteka aplikacija za izradu karte web mjesta.
- Najpopularniji dodatak za mapu stranice za WordPress.
Da bi Google znao za vašu kartu web-mjesta, morate dodati vezu na kartu web-lokacije u alate Search Console ili datoteku robots.txt
Dodavanje karte web-lokacije u Search Console:
- Ići https://www.google.com/webmasters/tools/
- Dodajte svoju web stranicu ili odaberite s popisa.
- Idite na indeksiranje - Sitemaps.
- Odaberite "dodaj datoteku karte web-lokacije", zalijepite vezu i dodajte kartu web-lokacije.
Dodavanje karte web-lokacije u robots.txt:
- Idite na korijenski direktorij stranice putem ftp-a.
- Otvorite datoteku robots.txt
- Dodajte redak "Sitemap: [site address] /sitemap.xml" na kraj datoteke i spremite datoteku.
Treći način za ubrzanje indeksiranja- obavijestite bota za pretragu o datumu Posljednja promjena stranicama. Da bi dobili datum i vrijeme promjene stranice, botovi koriste podatke iz zaglavlja odgovora lastmod poslužitelja. Možete prijaviti promjene na stranici pomoću koda odgovora ne mijenjaj.
Nadam se da više nemate pitanje: “Što je indeksiranje web mjesta”.
Prilikom pokretanja nove stranice, prvih 10 dana, webmaster je prisiljen čekati dok se njegov resurs ne indeksira i uđe u rezultate tražilice. Google obično indeksira brže i bolje od Yandexa. Ali robotu je ipak potrebno nekoliko dana da pređe cijelo mjesto. Indeksiranje se može ubrzati i učiniti lakšim nego što zvuči.
Ista situacija vrijedi kada napravite značajne promjene na web-lokaciji koja već radi. Na primjer, promjena url sustava ili izgleda. U tom slučaju bit ćemo zainteresirani za ponovno indeksiranje svih stranica.
Prvo morate natjerati tražilice da "vole" vašu stranicu. U njemu ne bi trebalo biti zagonetke. Najbolji način je stvoriti kartu web-lokacije za jednostavnu navigaciju.
Izradite Sitemap
Prvo nabavite kartu web-lokacije (Sitemap.xml).
Sitemap je datoteka s podacima o vašoj web stranici za tražilice. Sadrži popis stranica koje treba indeksirati. Zahvaljujući xml-markupu, sitemap pomaže tražilicama da brzo odrede strukturu stranice, učestalost njezinih ažuriranja i "težinu" nekih stranica u usporedbi s drugima.
Ako ne znate za mapu web-lokacije, to nije velika stvar. Postoje mnogi online resursi koji ga kreiraju za vas. Na primjer:
- MySiteMapGenerator (jezik: ruski, do 500 stranica besplatno)
- Web-Site-Map.com (jezik: engleski, potpuno besplatno)
- xml-sitemaps.com (jezik: engleski, do 500 stranica besplatno)
Jednostavno je: unesite url i sigurnosni kod, ostale postavke ne morate dirati u 90% slučajeva.
Nakon toga čekamo da robot indeksira vašu stranicu i doda sve pronađene stranice u datoteku. Kao rezultat, ova datoteka se može preuzeti. Indeksiranje obično traje 10-15 minuta. Bolje je preimenovati rezultirajuću datoteku u sitemap.xml, na koju se mora učitati korijenska mapa svoju stranicu.
Za ispravan rad podaci karte web mjesta u robots.txt... Pročitajte što je to. Za početak, samo trebate dodati svoj sitemap ovoj datoteci:
Korisnički agent: *
Dopusti: /
Sitemap: http: //site/sitemap.xml
Pola posla je obavljeno. Samo tako nastavi.
Prijavite se na Google Webmaster Tools
Google ima Alati za webmastere... Lako je raditi s njima. Dodajte adresu stranice:
Kako biste spriječili druge da prate vašu stranicu, morat ćete potvrditi prava na nju. Postoji nekoliko načina da to učinite. Najlakše je staviti google kod Analitika u
... Samo postavite kod brojača i kliknite "Provjeri". Inače, GA je jedan od bolje načine pratiti ponašanje posjetitelja na stranici. Stoga vam preporučam da ga aktivno koristite i da vas zanima što gosti rade na vašoj stranici. I je li im tamo zgodno.Stranica potvrdila:
Prenesite Sitemap
Otvorite upravljačku ploču web-mjesta, u odjeljku "Skeniranje" otvorite "Datoteke karte web-lokacije":
Unesite adresu karte web-lokacije:
Nakon potvrde, dajte robotima vremena da provjere datoteku na pogreške i dodaju popis URL-ova u bazu podataka za indeksiranje. Rezultati se mogu vidjeti kasnije u istom odjeljku. U idealnom slučaju, broj poslanih URL-ova trebao bi odgovarati broju indeksiranih URL-ova.
Pojednostavite navigaciju, ubrzajte svoju stranicu, generirajte kvalitetan sadržaj... To će osigurati da je vaša stranica u potpunosti indeksirana. I neće potpasti pod filter za copy-paste.
Kako ubrzati indeksiranje
A sada mala značajka koju sam jednom vidio na forumu na engleskom. Webmastera je zanimalo kako ubrzati indeksiranje nove stranice. Prenio je kartu web-mjesta, ali se sve stranice nisu pojavile u rezultatima pretraživanja. Savjet je bio vrlo jednostavan: da biste "prisilili" google da odmah počne skenirati, morate pokrenuti alat na upravljačkoj ploči "Pogledajte kao Googlebot".
U obrascu koji se pojavi potrebno je unijeti adresu karte web mjesta. Dodana datoteka pojavit će se na popisu ispod obrasca. Pritisnemo "pošalji u indeks". Nakon toga, Google robot će proći kroz sve veze s karte web mjesta, uzimajući za početnu stranicu karta web mjesta.
Napomena uz obrazac navodi da Google ne jamči da će sve datoteke web-mjesta biti indeksirane. Ipak, ova metoda je najlakša za privlačenje pažnje tražilice na svoju stranicu.
Za slatko
Kada je stranica indeksirana, možete se opustiti. Pa, za desert za vas, ovaj video o ljetu i aktivnostima na otvorenom:
Označite "Sviđa mi se", samo nas pratite na Facebooku
U ovom članku ćemo vam pokazati kako dodati svoju web stranicu na Google. U ovom primjeru pokazat ćemo vam korak po korak kako indeksirati WordPress stranicu na Googleu ( Google) pomoću dodatka Yoast SEO i usluga Google pretraživanje Konzola.
Istodobno, za one koji ne koriste WordPress, proces će biti isti, s jedinom razlikom što ćete morati koristiti alternativni pristup za izradu karte web-lokacije i osigurati uvjete da Google crawler indeksira vašu stranicu.
Ovdje Kratki opisšto ćemo pokriti u ovom članku:
- Tri koraka za dodavanje bilo koje stranice u Google pretraživanje.
- Kako dodati svoju WordPress stranicu u Google pretraživanje:
- Kako osigurati da Googleov alat za indeksiranje može indeksirati vašu web-lokaciju ( robots.txt).
- Kako instalirati i konfigurirati Yoast SEO dodatak.
- Kako koristiti Google Search Console za indeksiranje vaše stranice.
Tri koraka za dodavanje bilo koje stranice u Google pretraživanje
Proći ćemo kroz cijeli proces korak po korak za korisnike WordPressa, međutim, potrebno je slijediti gotovo sve iste korake bez obzira na to koju platformu koristite:
1. Provjerite može li Googlebot indeksiranje pristupiti stranicama web-mjesta koje želite indeksirati. To se odnosi na datoteku robots.txt. Ako ti - korisnik WordPress-a, vrlo je jednostavno, a mi ćemo vam pokazati kako.
2. Konfigurirajte Google Search Console za domenu koju želite dodati Google pretraživanju.
3. Pošaljite svoju kartu web-lokacije putem Google Search Consolea i zamolite Google da indeksira vašu stranicu.
Kako dodati svoju WordPress stranicu na Google Search Console
Da biste indeksirali WordPress web-mjesto, morate omogućiti Googlebot-u da indeksira vašu web-lokaciju, zatim izradite kartu web-mjesta i na kraju je poslati putem Google Search Consolea. Evo kako se to radi.
Korak 1 - Kako osigurati da Google alat za indeksiranje može indeksirati vašu web-lokaciju (robots.txt)
Lako je omogućiti Googleov alat za indeksiranje da indeksira vašu WordPress stranicu. Kada budete spremni da vaša stranica bude vidljiva putem tražilica, slijedite ove korake:
1. Na admin panelu WordPressa zadržite pokazivač miša iznad stavke glavnog izbornika “ Postavke"I odaberite odjeljak" Čitanje».
2. Pomaknite se prema dolje po stranici koja se otvara do " Vidljivost tražilice"I poništite okvir za" Zamolite tražilice da ne indeksiraju ovu stranicu". Ako ovaj potvrdni okvir nije poništen, to će biti razlog zašto Google ne indeksira web-mjesto i njegove stranice ili to čini loše.
3. Zatim spremite promjene
I to je sve što trebate učiniti u ovoj fazi kako bi Google mogao indeksirati vašu web-lokaciju. Prijeđimo na sljedeći korak.
Korak 2. Kako instalirati i konfigurirati Yoast SEO dodatak
Yoast SEO je besplatni WordPress dodatak koji preporučujemo svim korisnicima. V u ovom slučaju koristit ćemo ga za izradu karte web mjesta. Uz to, Yoast SEO je jedan od najboljih i najpovoljnijih WordPress dodaci za SEO, redovito se ažurira kako bi bio u toku s najnovijim trendovima.
Evo koraka instalacije dodatak Yoast SEO i izrada Sitemapa:
1. U administratorskoj ploči WordPressa, zadržite pokazivač miša iznad stavke glavnog izbornika "Dodaci" i odaberite odjeljak "Dodaj novo".
2. Bit ćete preusmjereni na spremište WordPress dodaci... Da biste pronašli dodatak Yoast SEO, unesite " Yoast SEO". Dodatak Yoast SEO će biti jedan od prvih rezultata.
4. Zatim kliknite gumb "Instaliraj" da biste instalirali dodatak.
5. Kada je dodatak instaliran, kliknite gumb "Aktiviraj" da biste aktivirali dodatak.
6. Nakon što aktivirate dodatak, vidjet ćete Nova kartica « SEO»S Yoast logom na glavnom izborniku WordPressa.
7. Pomaknite miš preko ove kartice i odaberite " Nadzorna ploča».
8. Odatle idite na karticu "Značajke", zatim se pomaknite prema dolje po ploči i omogućite " Dodatne opcije ". Spremite svoje promjene klikom na odgovarajući gumb koji se nalazi pri dnu zaslona.
9. Trebala bi se prikazati kartica Yoast SEO dodatne kartice... Idite na karticu "Naslovi i meta".
10. Zatim idite na karticu "Vrste zapisa". Ovdje možete odabrati elemente stranice koje želite indeksirati. U većini slučajeva potrebno je indeksirati samo stranice i postove. Ako i vama ova opcija odgovara, postavite parametar “ meta roboti"značenje" bez indeksa„Za sve što ne želite da budete indeksirani. Ako trebate više informacija o različite postavke, kliknite na poveznicu Pomoć i imat ćete pristup video tutorialu specifičnom za stranicu na kojoj se nalazite, kao i drugim informacijama o pomoći.
11. Nakon što zatvorite sve vrste postova za koje ne želite da se indeksiraju iz indeksiranja, učinite isto na karticama Taksonomije, Arhivi i Ostalo.
14. Pregledajte kartice Vrste objave i Taksonomije i omogućite stavke koje želite indeksirati i onemogućite one koje želite isključiti iz procesa indeksiranja. Međutim, za većinu web-mjesta, indeksiranje stranica i postova također je prikladno Dodatne informacije uvijek ga možete dobiti u odjeljku "Pomoć".
15. Zatim spremite promjene.
16. Idite na karticu "Općenito" i kliknite na vezu "XML sitemap". Kopiraj vezu iz adresna traka preglednik i spremite ga za buduću upotrebu na Google Search Consoleu.
To je sve za instalaciju i konfiguraciju dodatka Yoast SEO i generiranje URL-a Sitemapa. Sada možemo prijeći na postavljanje besplatnog Google Search Console računa i indeksiranje stranice.
Korak 3 - Kako koristiti Google Search Console za indeksiranje vaše stranice
Google Search Console je besplatni alat Google i mi ćemo ga koristiti za indeksiranje web stranice ili bloga. Ovaj alat također će vam pomoći u upravljanju svim pogreškama indeksiranja povezanih s vašom web-stranicom. Pogledajmo korake koji su uključeni u postavljanje vašeg računa:
1. Idite na Google Search Console. Prvo se morate prijaviti na svoj račun Google. Ovdje ne bi trebalo biti puno informacija ako niste prije radili s njima.
3. Zatim će se od vas tražiti da potvrdite vlasništvo nad domenom. Odaberite " Alternativne metode "I pritisnite gumb" HTML oznaka". Na ekranu će se pojaviti meta oznaka naziva. Odaberite cijelu oznaku i kopirajte je.
4. Vratite se na svoju administrativnu ploču WordPress i idite na odjeljak alata za dodatke Yoast SEO.
5. Idite na " Alati za webmastere". Ovdje ćete vidjeti tri tekstualna polja... Zalijepite meta oznaku koju ste kopirali s Google Search Consolea u tekstni okvir " Google Search Console". Kao dodatna opcija svoju stranicu možete indeksirati ne samo na Googleu (google), već i na drugim tražilicama. Spremite promjene.
6. Nakon toga se možete vratiti na Google Search Console i kliknuti gumb Provjeri. Nakon toga, trebali biste vidjeti poruku da je Google pronašao oznaku i da ste u redu.
7. Sada pritisnite tipku Dodaj/Provjeri Sitemap". Nadamo se da ste spremili URL Sitemapa koji ste ranije kopirali. Zalijepite ga u skočni prozor i kliknite gumb "Pošalji".
8. Trebali biste ponovno učitati stranicu, a nakon toga biste trebali vidjeti novi unos O datoteka karte web-mjesta... Ako u ovoj fazi dobijete pogrešku, najvjerojatnije je to zbog činjenice da vaša stranica blokira robote za pretraživanje. Ne brinite o tome.
9. U odjeljku "Skeniraj" izbornika idite na " Pogledajte kao Google". Zatim pritisnite gumb " Ekstrakt i prikaz". Ovo može potrajati.
10. Nakon toga trebali biste vidjeti status "Djelomično". Kliknite na " Pošalji na indeks"Do njega. Trebao bi se pojaviti prozor koji od vas traži da potvrdite da niste robot. Označite okvir i odaberite opciju " Indeksirajte ovaj URL i sve njegove izravne veze". Kliknite Pošalji.
11. Pored statusa "Djelomično" sada bi se trebala pojaviti poruka koja navodi da " URL i pridružene stranice poslane na indeksiranje».
Google je prva svjetska tražilica. U kojoj god regiji promovirate stranicu, svakako je morate dodati u ovu tražilicu. U ovom članku ću vam pokazati kako dodati svoju web stranicu na Google i brzo i ispravno je indeksirati.
Možete saznati kako dodati web mjesto na Yandex.
Kako dodati web stranicu na Google
Imajte strpljenja, jer svi tražilice vrlo sporo. Za indeksiranje stranice bit će potrebno nekoliko tjedana. To znači da nema potrebe odgađati dodavanje stranice tražilici. Ako ste upravo kreirali stranicu, a na njoj još nema unosa, već možete dodati.
Da biste web lokaciju dodali na Google, morate imati račun u ovoj tražilici (ako koristite poštom Gmail, onda smatrajte da postoji račun, preko njega možete pristupiti svima Google alati). Učinite sljedeće redom:
- Idite na alate Google webmaster, koji se nalaze i kliknite na gumb " Dodajte resurs". Unesite adresu stranice koju dodajete i kliknite na " Nastaviti».
Dodavanje stranice na Google
- Pojavit će se Sljedeća stranica, gdje trebate potvrditi prava na svoju stranicu. Postoji nekoliko načina, ali najjednostavniji i najprikladniji je korištenje HTML datoteke. Preuzmite datoteku koja vam se nudi u stavku 1 google upute i prenesite ga u korijenski direktorij svoje stranice. Ako ste sve učinili ispravno, onda kada kliknete na poveznicu u stavku 3 u Google uputama, vidjet ćete sadržaj ove stranice. Ako ne, onda stranica 404. Pritisnite tipku " Potvrdite».
Potvrda prava na stranicu
- Za dodavanje web-mjesta na Google i ispravan rad i brzo indeksiranje, morate robotima za pretraživanje pokazati gdje imate. Da biste to učinili, idite na upravljačku ploču web-mjesta u Google alatima za webmastere, kliknite stavku " Skeniranje"I odaberite podstavku" DatotekeSitemap". Klikni na " Dodajte / provjerite datotekuSitemap"I unesite adresu prije karte u redak, na primjer" ru /karta web mjesta.xml". Imajte na umu da je domena web-mjesta već napisana tamo, tako da morate unijeti bez nje - " karta web mjesta.xml". Zatim pritisnite gumb " Pošalji datotekuSitemap". Ako želite provjeriti ima li pogrešaka prije nego što to učinite, kliknite " ČekSitemap».
Dodavanje karte web mjesta
Ako ste učinili sve na ovim točkama, smatrajte da ste uspjeli dodati stranicu na Google. Sada morate malo pričekati dok tražilica sve indeksira. To obično traje 1-3 tjedna. Možete kontrolirati cijeli proces indeksiranja u
Stranice je potrebno indeksirati. Indeksiranje web mjesta - što je to jednostavnim riječima? Svaka tražilica ima svog robota za pretraživanje. On može posjetiti stranicu u bilo kojem trenutku i "prošetati" njome, prebacujući sve skenirane dokumente (sve html-kodove, tekst, slike, linkove i sve ostalo) u bazu svoje tražilice. Taj se proces naziva "skeniranje".
Pa, sada potražimo odgovore na pitanja "kako ubrzati indeksiranje?" i "kako poboljšati indeksiranje?"
Kako provjeriti indeksiranje stranice u Googleu i Yandexu
Postoji nekoliko načina da dobijete odgovor na pitanja "je li ova stranica indeksirana?", "Koliko je stranica indeksirano?" itd. Pogledajmo neke od najučinkovitijih. Ali prvo, malo pojašnjenje - obrada upit za pretraživanje i formacija Rezultati pretraživanja događa se na temelju indeksiranih "kopija" stranica koje se nalaze u bazi podataka tražilice, a ne na temelju stranica dostupnih na stranici. Pa, sada o tri načina za provjeru indeksiranja:
Ormari tražilica Yandex, Google, Mail.ru itd. Već tamo, sa 100% vjerojatnošću, možete dobiti sve potrebne podatke.
Runet je pun prikladnih online usluga. Gotovo svi rade na isti način: naznačena je adresa stranice i na prvi pogled dobivamo podatke i cjelokupnu povijest indeksiranja stranice.
Ručna provjera putem web-mjesta: operator. Oni. voziti u niz za pretraživanje site: your-site.guru i odmah dobiti popis indeksiranih stranica (u obliku rezultata pretraživanja) i njihov broj.
Provjerite indeksiranje web mjesta u Yandex.Webmasteru
Ovdje možete odmah ispustiti u stupac popis stranica koje je potrebno provjeriti za indeksiranje. Štoviše, popis može sadržavati i isključivo nazive domena (na primjer, your-site.go), i veze na neke specifične dokumente (na primjer, your-site.go / content / domashka /) - nije važno, jer. Do. usluga automatski "izolira" nazive domena.
Ova usluga može provjeriti indeksiranje na Googleu i Yandexu. Dopušteno je do 250 čekova dnevno.
Ukratko, usluga je potpuno slična prethodnoj, uz dvije iznimke:
- servis provjerava indeksiranje "na komad", t.j. istovremeno se može provjeriti samo jedno mjesto;
- također možete provjeriti indeksiranje u Bingu.
Kako ubrzati indeksiranje web stranice
Malo je vjerojatno da će neki od vas imati pitanje "zašto ubrzati indeksiranje?" odgovor na to je već očit: kako bi se što prije sve poduzelo potrebne mjere osvojiti sve najviše pozicije za promovirane zahtjeve.
Prva stvar koju trebate učiniti je dodati web mjesto svojim računima webmastera s Googlea i Yandexa. Ako se to ne učini, tada će se stranica indeksirati vrlo sporo i vrlo rijetko, ostavljajući webmastera na miru sa svojim tučkom o osvajanju barem TOP-10.
Zatim morate ispravno konfigurirati robots.txt, jer robot za pretraživanje može skenirati samo određeni broj stranica po posjetu. I bit će vrlo uvredljivo ako robot počne skenirati stranice "tehničke" prirode (na primjer, stranicu za registraciju na web-mjestu ili stranicu za unos lozinke), koje nemaju nikakve veze s indeksom. Kako se to ne bi dogodilo, podaci o tome koje stranice ne treba indeksirati unose se u datoteku robots.txt. Nećemo sada govoriti o tome kako se robots.txt sastavlja jer već imamo detaljan članak na ovu temu.
Sljedeći korak je konfiguracija xml karte web mjesta (sitemap.xml). Sadrži popis svih stranica koje tražilice trebaju indeksirati. Također možete odrediti prioritet indeksiranja, pa čak i intervale. Što se karta web mjesta češće ažurira, veća je vjerojatnost da će robot za pretraživanje odlučiti češće posjećivati stranicu (što je upravo ono što nam treba, zar ne?).
Brzina stranice također može utjecati na indeksiranje. što brže robot za pretraživanje dobije odgovor na svoj zahtjev, to bolje, jer ako robotu kažete "ručamo, vrati se za sat vremena" - robot će jednostavno otići, i to na duže vrijeme.
Pogreške u kodu također mogu utjecati na indeksiranje, samo negativno. Stoga je iznimno važno da u kodu uopće nema grešaka. umjesto koda 200 (naime, ovaj kod se daje kada ispravan rad) robot za pretraživanje može primiti kod, na primjer, 404 ili neki drugi koji ukazuje na pogrešku.
U većini slučajeva, gore opisane mjere dovoljne su da se stranica dovoljno brzo indeksira.
Brzo indeksiranje web mjesta u Yandexu
Postoji još nekoliko neočiglednih načina za ubrzavanje indeksiranja nove stranice u Yandexu. Već smo mnogo puta spomenuli registraciju na račune webmastera s Yandexa, Googlea, Binga i Maila.
U tim ormarićima možete primati statistiku o reindeksiranju stranica, kao i primati obavijesti o određenim pogreškama vezanim uz rad stranice.
A sada malo "life hacka". U Yandex.Webmasteru idite na "Indeksiranje" - "Ponovno indeksiranje stranica" i navedite adresu novostvorene stranice. Da, ne raspravljamo se, ne radi uvijek, tk. Nakon obavijesti, robot za pretraživanje Yandexa djeluje po vlastitom nahođenju i ne odlučuje uvijek posjetiti ovu stranicu, ali će barem saznati za to. Stoga preporučamo korištenje ovog alata za ubrzanje indeksiranja nove stranice ili njezinih stranica.
Indeksiranje slika stranice
Uglavnom, dobivanje ovih informacija bit će korisno ako promovirate, recimo, hosting fotografija.
Važno je napomenuti da Google, Bing i Yandex indeksiraju tekst i slike različitih robota. Google najbrže indeksira slike. Yandex indeksira slike puno sporije u usporedbi s Googleom, ali mnogo brže u usporedbi s Bingom, a potonji samo sporo indeksira Runet stranice. Ne vjerujete?
Međutim, postoji jedan univerzalni savjet za optimizaciju slika - upisivanje u kod alt atributi= ”” I naslov = ”” za svaku sliku, jer oboje su vrlo važni.
Ako zadržite pokazivač miša iznad slike, može se "iskočiti" tekstualni savjet s objašnjenjem kako bi korisnik lakše razumio "gdje pogledati i što vidjeti". Tekst ovog savjeta ispisan je u atributu title = ””.
Postoje i situacije kada se slika iz nekog razloga ne učita (može biti izbrisana, učitavanje slike može biti onemogućeno u pregledniku - nije važno). U tom slučaju umjesto fotografije trebao bi se pojaviti tekst koji opisuje što je točno prikazano na slici koja nije učitana. Upravo je ovaj tekst napisan u atributu alt = ””.
Kako saznati koliko slika indeksira tražilica?
Odgovor je krajnje jednostavan: idite do onoga koji nas zanima pretraživač, u liniji za pretraživanje vozimo na web-stranici operatera :, nakon dvotočke bez razmaka, upišite naziv domene, potvrdite zahtjev tipkom Enter, a zatim idite na karticu "Slike" ili "Slike" (ovisno o tražilici). Vidjet ćete same slike, kao i saznati njihov točan broj.
Za Yandex to će izgledati ovako:
A za Google - ovako
Pitanja
Kako spriječiti indeksiranje stranice
Ponekad je potrebno zabraniti indeksiranje stranice. Za to može postojati nekoliko razloga - inženjerskih radova na web mjestu ili se testira novi dizajn, itd.
Postoji nekoliko načina da kažete tražilicama "ovdje ne morate ništa indeksirati".
Prvi, najpopularniji i najjednostavniji je putem datoteke robots.txt. Ovdje samo trebate napisati ovaj kod:
Pogledajmo sada što ovaj kod znači.
User-agent je direktiva koja specificira naziv robota za pretraživanje za koji je generiran popis pravila. Ako je kao naziv navedena zvjezdica, tada je popis relevantan za sve robote za pretraživanje (osim za one za koje su sastavljeni pojedinačni popisi pravila). Ako navedete naziv robota za pretraživanje umjesto zvjezdice, tada će se popis pravila primjenjivati posebno na njega:
Korisnički agent: yandex
Direktiva Disallow: dizajnirana da kaže robotima za pretraživanje koje datoteke/mape da skeniraju. U našem slučaju, jedna kosa crta označava da je zabranjeno indeksirati cijelu stranicu u cjelini.
Tamo su posebnim slučajevima kada je potrebno zatvoriti indeksiranje za sve tražilice, osim za jednu određenu. U ovom slučaju imat ćemo 2 popisa (od kojih je jedan prikazan gore na snimci zaslona), a drugi - pojedinačni popis za određenog robota. U ovom slučaju, robot tražilice Yandex.
Korisnički agent: Yandex
Pozabavili smo se User-agentom i Disallow, sada ćemo se pozabaviti direktivom Allow. To je dopuštena direktiva. Govoreći jednostavan jezik, gornji kod datoteke robots.txt zabranjuje indeksiranje stranice svim tražilicama osim Yandexa.
Da, ne raspravljamo se, unatoč zabranama, tražilice i dalje mogu indeksirati stranicu. Međutim, to je toliko rijetko da se čak i statistička pogreška može nazvati rastezanjem.
Drugi način su roboti. Da biste to učinili, dodajte sljedeći redak kodu web-mjesta:
META NAZIV = ”ROBOTI” SADRŽAJ = ”NOINDEX, NOFOLLOW”
VAŽNO!!! Možete ga dodati na način da se učita u kod svake stranice stranice, bez iznimke, ili ga možete dodati nekom odvojene stranice... Ali u oba slučaja, ovaj meta tag mora biti smješten u html području head.
U usporedbi s prvom, druga metoda je teža za masovnu zabranu indeksiranja, a lakša za točku.
Treći način je zatvaranje stranice putem .htaccess-a
Metoda je također prilično jednostavna - dodajte sljedeći kod u .htaccess datoteku:
Sada robot za pretraživanje neće moći pristupiti stranici bez lozinke.
Ovo je najviše pravi put zatvorite stranicu iz indeksiranja, ali se pojavljuje još jedan problem - postoje poteškoće sa skeniranjem stranice za pogreške, jer ne može se svaki parser prijaviti.
Metoda 4 je postavljanje zaglavlja HTTP odgovora
Ova metoda je također prilično učinkovita za točku zabranu indeksiranja. Radi na sljedeći način - zajedno s kodom odgovora poslužitelja, šalje se i zaglavlje X-Robots-Tag s oznakom noindex. Dobivši takav "popratni" odgovor, tražilica neće indeksirati ovu stranicu.
Ako je potrebno, možete poslati nekoliko zaglavlja X-Robots-Tag. U ovom slučaju postoje dva od njih noarchive i unavailable_after.
Ako je potrebno, prije direktive možete naznačiti i robota za pretraživanje kojemu je direktiva upućena, a same direktive se mogu pisati odvojene zarezima. Na primjer, ovako:
I, naravno, sami ste već pretpostavili da ako ne postoji ime korisničkog agenta, naredbu će izvršiti svi roboti. Oni. direktive se mogu kombinirati na različite načine za različite indekse.
Kako otvoriti stranicu za indeksiranje
Odgovor je već čuo - pomoću direktive Allow (sjetite se primjera kada smo pomoću robots.txt blokirali indeksiranje stranice za sve tražilice osim Yandexa).
Dopusti: / dopušta indeksiranje stranice, a Disallow: / zabranjuje.
Kada je stranica zadnji put indeksirana
Pregledajte i indeksirajte povijest roboti za pretraživanje Google je dovoljno jednostavan. Za početak, u liniju za pretraživanje upisuje se operator site:, nakon dvotočke bez razmaka navodi se naziv vaše domene, zatim kliknemo u "Alati" i u jednom od stupaca odabiremo odgovarajuću točku. Ako odaberete "u posljednja 24 sata", tada možete dobiti popis stranica koje su indeksirane u posljednja 24 sata ili dobiti "Ništa nije pronađeno". To znači da vaša stranica nije ponovno indeksirana u posljednja 24 sata.
U Yandexu se sve radi još lakše - sve potrebne informacije a povijest je dostupna u Yandex.Webmasteru:
Kako dodati web mjesto za indeksiranje
Ove informacije će biti korisne svima koji su upravo izradili svoju prvu web stranicu, t.j. što se stranica brže indeksira, brže ćete dobiti svoj prvi promet pretraživanja.
Dodavanje stranice na Google
Prvo slijedite vezu http://www.google.com/addurl/?continue=/addurl, prijavite se (ako je potrebno), unesite URL, prođite kroz captcha (u ovom slučaju označite okvir "Ja nisam robot" i prođite kroz 1-2 zadatka sa slikama), te kliknite "Pošalji zahtjev".
Tada ćete dobiti ovakvu poruku. To znači "OK, stranica je uzeta u obzir, uskoro ćemo tamo pogledati."
Ako je sa stranicama sve u redu, indeksiranje će se dogoditi vrlo brzo.
Dodavanje web mjesta u Yandex
Prije svega, idite na https://webmaster.yandex.ru/, registrirajte se, zatim idite na Indeksiranje - Ponovno indeksiranje stranica i tamo dodajte naziv domene svoje stranice. Sve.
Dodavanje web-mjesta na Bing
Ovdje je još lakše - idite ovdje http://www.bing.com/toolbox/submit-site-url, unesite naziv domene, captcha i gotovi ste! Registracija nije potrebna.
VAŽNO!!! Na ovaj trenutak besmisleno je promovirati stranice na ruskom jeziku na Bingu, za razliku od onih na engleskom. To je zbog činjenice da vrlo malo ljudi u Rusiji zna za tražilicu Bing.
Dodavanje stranice u Mail.ru Search
Ovaj postupak je također prilično jednostavan - idite na ured webmastera mail.ru na poveznici http://go.mail.ru/addurl, registrirajte se / prijavite se, zatim navedite naziv domene web-mjesta, unesite captcha i kliknite "Dodaj" .
Tada će se na ekranu prikazati sljedeća poruka:
p.s. Indeksiranje stranice na Wordpress, Wix, Joomla, Ucoz ili bilo koji drugi CMS ili konstruktor nije ništa drugačije. Sve ovisi o skupu pravila koja su zapisana u datoteci robots.txt ili u samom kodu stranice. Da biste saznali više o tome kako pravilno konfigurirati datoteku robots.txt, kao i kako otvoriti ili zatvoriti stranice od indeksiranja u Yandexu i Googleu, pročitajte OVAJ članak! Također, u članku ćete pronaći gotove robots datoteke za ispravno indeksiranje WordPress, Joomla, Wix stranica u Yandexu i Googleu.
