Kiire viis lehtede indekseerimise kontrollimiseks Yandexis ja Google'is. Kuidas teada saada, kui palju lehti on Yandexi või Google'i registris? Kuidas kontrollida, kas leht on indekseeritud või mitte

Oleme välja andnud uue raamatu „Sotsiaalmeedia sisuturundus: kuidas saada oma jälgijate pähe ja panna nad oma kaubamärgisse armuma”.

Saidi indekseerimine on saidi teabe otsimise, kogumise, töötlemise ja otsingumootori andmebaasi lisamise protsess.

Rohkem videoid meie kanalil – õppige SEMANTICA abil internetiturundust

Saidi indekseerimine tähendab, et otsingumootori robot külastab ressurssi ja selle lehti, uurib sisu ja sisestab selle andmebaasi, seejärel tagastatakse see teave võtmepäringute alusel. See tähendab, et võrgu kasutajad sisestavad päringu otsinguribale ja saavad vastuse indekseeritud lehtede loendi kujul.

Lihtsamalt öeldes kõlab see umbes nii: kogu Internet on tohutu raamatukogu. Igal endast lugupidaval raamatukogul on kataloog, mis hõlbustab vajaliku teabe leidmist. Eelmise sajandi 90ndate keskel taandus kogu indekseerimine sellisele kataloogimisele. leidis veebisaitidelt märksõnu ja moodustas nendest andmebaasi.

Tänapäeval koguvad ja analüüsivad robotid infot mitme parameetri (vead, unikaalsus, kasulikkus, saadavus jne) alusel enne selle otsingumootorisse sisestamist.

Otsingurobotite algoritme uuendatakse pidevalt ja need muutuvad keerukamaks. Andmebaasid sisaldavad tohutul hulgal teavet, hoolimata sellest ei võta vajaliku teabe otsimine palju aega. See on näide kvaliteetsest indekseerimisest.

Kui sait pole indekseeritud, ei pruugi teave kasutajateni jõuda.

Kuidas Google'i ja Yandexi saite indekseerida

Yandex ja Google on võib-olla Venemaal kõige populaarsemad otsingumootorid. Selleks, et otsingumootorid saaksid teie saiti indekseerida, peate sellest teatama. Seda saate teha kahel viisil.

Lisage sait indekseerimiseks, kasutades linke muudel Interneti-ressurssidel - seda meetodit peetakse optimaalseks, kuna robot peab sel viisil leitud lehti kasulikuks ja indekseeritakse kiiremini, 12 tunnist kahe nädalani.
Esitage oma sait indekseerimiseks, täites käsitsi spetsiaalse otsingumootori vormi, kasutades teenuseid Yandex.Webmaster, Google Webmaster Tools, Bing Webmaster Tools jne.

Teine meetod on aeglasem; sait pannakse järjekorda ja indekseeritakse kaks nädalat või kauem.

Uued saidid ja lehed indekseeritakse keskmiselt 1–2 nädalaga.

Arvatakse, et Google indekseerib saite kiiremini. See juhtub seetõttu, et Google'i otsingumootor indekseerib kõik lehed – nii kasulikud kui ka mittekasulikud. Kuid järjestatakse ainult kvaliteetne sisu.

Yandex töötab aeglasemalt, kuid indekseerib kasulikud materjalid ja jätab kohe otsingust välja kõik rämpslehed.

Saidi indekseerimine toimib järgmiselt:

otsingurobot leiab portaali ja uurib selle sisu;
saadud teave sisestatakse andmebaasi;
umbes kahe nädala pärast ilmub päringu korral otsingutulemustesse materjal, mis on edukalt läbinud indekseerimise.

Saidi ja selle lehtede indekseerimise kontrollimiseks Google'is ja Yandexis on kolm võimalust:

veebihaldurite tööriistade kasutamine – google.com/webmasters või webmaster.yandex.ru;
sisestades otsinguribale spetsiaalsed käsud, näeb Yandexi käsk välja järgmine: host: saidi nimi + esimese taseme domeen; ja Google - sait: saidi nimi + domeen;
kasutades spetsiaalseid automaatseid teenuseid.

Indekseerimise kontrollimine

Seda saab teha kasutades:

otsingumootori operaatorid - vaadake abist või;
eriteenused, näiteks rds baar;

Kuidas kiirendada saidi indekseerimist

Uue materjali otsingutulemustesse ilmumise kiirus sõltub sellest, kui kiiresti robotid indekseerimist teostavad ja seda kiiremini sihtrühm lehele jõuab.

Otsingumootorite indekseerimise kiirendamiseks peate järgima mitmeid soovitusi.

Lisage sait otsingumootorisse.
Täitke projekt regulaarselt ainulaadse ja kasuliku sisuga.
Saidil navigeerimine peaks olema mugav, ligipääs lehtedele ei tohiks olla avalehelt pikem kui 3 klõpsu.
Asetage ressurss kiirele ja usaldusväärsele hostimisele.
Konfigureerige fail robots.txt õigesti: kõrvaldage mittevajalikud piirangud, blokeerige teenuselehtede indekseerimine.
Kontrollige vigu, märksõnade arvu.
Loo sisemine linkimine (lingid teistele lehtedele).
Postitage artiklite lingid sotsiaalvõrgustikesse ja sotsiaalsetesse järjehoidjatesse.
Looge saidikaart või isegi kaks, üks külastajatele ja teine robotitele.

Kuidas blokeerida saidi indekseerimine

Blokeeri saidi indekseerimine – keelake otsingurobotite juurdepääs saidile, mõnele selle lehele, osale tekstist või pildist. Tavaliselt tehakse seda tundliku teabe, tehniliste lehtede, arendustaseme saitide, dubleerivate lehtede jms avaliku juurdepääsu eest varjamiseks.

Seda saate teha mitmel viisil.

Fati robots.txt abil saate takistada saidi või lehe indekseerimist. Selleks luuakse veebilehe juurtes tekstidokument, mis paneb paika otsingumootori robotite reeglid. Need reeglid koosnevad kahest osast: esimene osa (User-agent) näitab adressaati ja teine (Disallow) keelab mis tahes objekti indekseerimise.
Näiteks kogu saidi indekseerimise keelamine kõigile otsingurobotidele näeb välja järgmine:

Kasutaja agent: *

Keela: /

Kasutades robotite metasilti, mida peetakse kõige õigemaks viisiks ühe lehe indekseerimise blokeerimiseks. Märgendite noindex ja nofollow abil saate takistada otsingumootorite robotitel saiti, lehte või tekstiosa indekseerimist.

Kirje terve dokumendi indekseerimise keelamiseks näeb välja järgmine:

Saate luua konkreetse roboti jaoks keelu:

Mida mõjutab indekseerimine edutamise ajal?

Tänu indekseerimisele kaasatakse saidid otsingumootorisse. Mida sagedamini sisu värskendatakse, seda kiiremini see juhtub, kuna robotid tulevad saidile sagedamini. Selle tulemuseks on kõrgem otsingujärjestus.

Saidi indekseerimine otsingumootorites annab külastajate sissevoolu ja aitab kaasa projekti arendamisele.

Lisaks sisule hindavad robotid liiklust ja külastajate käitumist. Nende tegurite põhjal teevad nad järeldusi ressursi kasulikkuse kohta, külastavad saiti sagedamini, mis tõstab selle otsingutulemustes kõrgemale positsioonile. Järelikult liiklus taas suureneb.

Indekseerimine on projektide edendamisel oluline protsess. Et indekseerimine oleks edukas, peavad otsingurobotid tagama teabe kasulikkuse.

Otsingumootorite kasutatavad algoritmid muutuvad pidevalt ja muutuvad keerukamaks. Indekseerimise eesmärk on info sisestamine otsingumootori andmebaasi.

Otsingumootori register on andmebaas, mis salvestab teavet veebidokumentide kohta. Selle "salvestuse" eesmärk on ilmne - andmebaasi kasutades saab otsingumootor kiiresti ja täpselt arvutada järjestustegurite väärtused, kasutaja päringule vastava URL-i numbrilise väärtuse ja genereerida otsingutulemusi.

SEO spetsialistide ja veebisaitide omanike jaoks tähendab see üht – mitut lehekülge indekseeritakse, kui palju dokumente on sihitud päringute otsingutulemustes võimalik leida ja kui palju URL-e saab liiklust meelitada.

Kuidas kiiresti Yandexis ja Google'is indekseerimist kontrollida?

Lehtede indekseerimise kontrollimiseks on palju meetodeid ja teenuseid ning meil on kolm tööriista, mis näitavad registris olevate dokumentide arvu domeenide kaupa:

Lihtsalt määrake domeen ükskõik millises neist. Tööriist aitab teil kontrollida saidi indekseerimist ja öelda, kui palju dokumente on Google'i ja Yandexi andmebaasis, võttes arvesse alamdomeene või ilma nendeta:

Otsi operaatoreid indekseerimise kontrollimiseks

Saidi indekseerimise saate teada otsinguoperaatorite abil. Yandexi jaoks on need operaatorid "site:", "host:" ja "url:".

Google'i jaoks – “site:”, “inurl:” ja “info:”.

Mõlemad otsingumootorid annavad ligikaudseid tulemusi, kuid saate kasutada lisaparameetreid, et näha, mitu lehekülge nädalas indekseeriti, näiteks:

Saidi konkreetse lehe indekseerimise kontrollimiseks kasutage Yandexi puhul operaatorit "url:" ja Google'i puhul "info:".

Veebihaldur ja otsingukonsool

Avage Webmasteris vahekaart "Indekseerimine" - "Otsingus olevad lehed". Siit leiate statistikat otsingusse lisatud ja eemaldatud dokumentide kohta. Samuti saate vaadata kogu saidi muudatuste ajalugu teatud kuupäevavahemiku kohta.

Saate vaadata oma saidi indekseerimist Google'is, kasutades Search Console'i. Konsooli uues versioonis minge vahekaardile "Olek" - "Saadetud URL-ide indekseerimine" ja saate pildi muudatustest, vigadest, välistatud lehtedest ja näitamiste graafikust:

Võimalik indekseerimise juhtimine

Oluline on mõista, et saidi lehe roomamine või roomamine ei tähenda, et see on registrisse kaasatud. Mõnikord on vaja keelata otsingus mittevajalike lehtede indekseerimine, näiteks: tehniliste GET-parameetritega URL-id, teenuse- või kasutajadokumendid (ostukorv, isiklik konto jne), UTM-i siltidega dokumendid. Seetõttu on soovitatav, et igal saidil oleks:

Sitemap.xml on fail, mis aitab otsingurobotidel saidil üles roomata, võttes arvesse määratud prioriteete.

Robots.txt on fail, mis määrab roomamise reeglid ja parameetrid kõigi otsingumootori robotite jaoks või igaühe jaoks eraldi:

Kasutades käsku Disallow, saate takistada üksikute URL-ide või saidi jaotiste indekseerimist.

Roomamise viivitus – määrab minimaalse aja, mille jooksul robot võtab serveriga ühendust, et vältida saidi koormusi.

Clean param – võimaldab määrata URL-ides CGI parameetreid, mis pole indekseerimise jaoks olulised, st erinevad kasutajatunnused, seansid jne. Kasutatakse ainult Yandexis.

Avatud lehed peaksid olema otsingus, alles siis saab mõelda järjestusele. Ärge unustage kontrollida saidi indekseerimist, jälgida muutusi ja edukaid positsioone otsingutulemustes!

Esitage küsimus või jätke kommentaar

On väga oluline, et kõik saidi lehed oleksid otsingumootorites (Yandex, Google jne) indekseeritud.

Esiteks, kui leht pole registris, siis inimesed ei leia seda üles ja raisasite aega (ja võib-olla ka raha) selle loomisele, sisule ja kujundusele. Iga indeksi leht on külastajate allikas.
Teiseks, kui leht pole registris, võib see viidata saidi tehnilistele probleemidele, nagu dubleeritud sisu, saidi või hostimise tõrked.
Kolmandaks võib see leht mängida tehnilist rolli, näiteks osaleda linkimisskeemis (või sisaldada tasulisi linke, mille eest te ei saa tasu, kui leht pole registris).

Klientidega töötades olen korduvalt kokku puutunud tõsiasjaga, et indekseerimisega seotud probleemide tõttu olid halvad positsioonid. Tegemist on tehnilise probleemiga, mille parandan tavaliselt esimesel koostöökuul, mille tõttu on juba alates 2. kuust märgatav külastajate ja positsioonide kasv.

Allpool käsitlen käsitsi ja automatiseeritud viise lehtede indekseerimise kontrollimiseks Yandexis ja Google'is. ma näitan sulle kuidas kontrollida saidi indekseerimistüldiselt ja iga leht eraldi.

Kuidas teada saada saidi lehtede arvu

Seda saab teha mitmel viisil:

Nüüd, kui teame tegelikku lehtede arvu, peame kontrollima, kui palju neist on Yandexis ja Google'is indekseeritud

Vaatleme saidi indekseerimist tervikuna

Sel juhul saame teada Mitu saidi lehekülge on otsingumootoris indekseeritud?. Mida see meile annab? Teades saidi tegelikku lehtede arvu, saame võrrelda, kas see vastab indekseeritud lehtede arvule. Ja kui see klapib, siis on kõik korras ja kui ei, siis peate probleemi välja selgitama ja uurima, millised lehed puuduvad (või millistel lehtedel on duplikaadid).

Saidi indekseerimine Yandexis

Mitmeid viise.

Nagu näete, on andmed veidi erinevad. Selle põhjuseks on asjaolu, et url:your-site disain ei näita mitte ainult lehti, vaid ka muud tüüpi faile (doc, xls, jpg jne). Veebihaldur näitab täpselt lehtede arvu.

Veebisaidi indekseerimine Google'is

Sarnaselt Yandexiga on siin kaks meetodit:

Saidi käsitsi kasutamine: teie saidi konstruktsioon. Mõju on ligikaudu sama, mis Yandexi puhul.
Google Webmaster Toolsi kasutamine https://www.google.com/webmasters/(analoog Yandex.Webmasteriga)

automaatsed meetodid

Mis järgmiseks

Nüüd, kui teame, kui palju tegelikke lehti on indekseeritud, võib olla kolm olukorda.

Lehtede arv otsingumootorites ja veebisaidil on sama. See on ideaalne valik, see tähendab, et saidiga on kõik korras.
Indekseeritud lehekülgi on vähem. See tähendab, et saidiga on probleeme (kõige populaarsem probleem on väheinformatiivne või ebaunikaalne sisu)
Indekseeritud lehtede arv on suurem. Tõenäoliselt on teil probleem lehtede dubleerimisega, s.t. ühele lehele pääseb juurde mitmel aadressil. See on edutamiseks halb, sest... Lehe staatiline kaal on udune ja lisaks on palju korduva sisuga lehti.

Saidi edasiseks diagnoosimiseks peame välja selgitama, millised lehed on täpselt indekseeritud ja millised pole registrisse kaasatud.

Kuidas kontrollida ühe lehe indekseerimist

Meil võib seda vaja minna, kui tahame kontrollida oma saidi konkreetset lehte (näiteks hiljuti avaldatud) või kellegi teise saidi lehte (näiteks kus ostsime lingi ja ootame selle indekseerimist)

Kuidas kontrollida kõigi lehtede indekseerimist eraldi

Sel juhul kontrollime saidi kõiki lehti korraga indekseerimiseks ja selle tulemusena saame teada Milliseid konkreetseid lehti otsingumootoris ei indekseerita?.

Siin ei pea me teadma mitte ainult saidi tegelike lehtede arvu, vaid ka nende lehtede aadresside loendit (nende URL-e). See on ilmselt selle artikli kõige keerulisem asi. Näib, et saime saidikaardi loomisel lehtede loendi, kuid seal olevad aadressid ei sisaldu puhtal kujul ja nende väljavõtmiseks peab olema võimalik töötada mingi andmetöötlusprogrammiga. Seetõttu kasutame teist programmi.

Kuidas hankida saidi kõigi lehtede loend

Enne linkide kogumist peate konfigureerima parameetri Välista mustrid. Seda tehakse selleks, et välistada mittevajalikud lingid kogumisel, näiteks minu puhul, kui kogun palju aadresse, näiteks: https://site/prodvizhenie/kak-prodvigayut-sajjty.html? replytocom=324#respond, mis osutavad lehel olevale kommentaarile. Ja mul on vaja ainult lehe aadressi. Seetõttu konfigureerisin aadresside välistamise, kasutades *replytocom* maski:

Järgmisena hakkame koguma URL-e ja kui programm lõpetab nende kogumise, läheme Yahoo Map / Text sakile ja kopeerime sealt aadressid (salvestamisnupp ei tööta, kuna kasutame programmi tasuta versiooni)

Nüüd on meil kõigi lehtede aadressid.

Kuidas lehe indekseerimist automaatselt kontrollida

Siin on kõik lihtne. Pärast programmi käivitamist lisage viimases etapis kogutud saidi URL-ide loend ja lisage need allika URL-ide loendisse. Programm võimaldab teil kontrollida indekseerimist Yandexis, Google'is ja Rambleris, valida vajalik otsingumootor ja käivitada kontroll:

Kui olete saanud nimekirja lehtedest, mida registrisse ei lisatud, peate mõistma, miks see juhtus. Kui lehega on kõik korras, siis selleks, et see indeksisse jõuaks, saab täiendatud kontodelt osta selle linke või mitu retweeti.

Järeldus

Võimalus kontrollida oma veebisaidi lehtede indekseerimist võimaldab teil otsingumootoritega produktiivsemalt töötada ja tuvastada saidiga olemasolevad probleemid.

Otsingumootorite indekseeritud lehed on väga olulised, sest sisuliselt ainult veebisaidi või ajaveebi lehti indekseerides saab Google aru, milliste päringute korral neid otsingutulemustes kuvada. Mida rohkem lehti Google indekseerib, seda rohkem otsinguliiklust on võimalik saada rohkemate päringute jaoks.

Kuidas indekseeritud lehtede arv mõjutab saidi positsiooni otsingutulemustes

Kas keegi on kuulnud mõistest "Google dance"? See on seisund, milleni teie veebisait või ajaveeb jõuab, kui arendate seda reeglite järgi, suurendades järsult liiklust alates . Kõik indekseeritud lehed tõusevad pingereas, kuna saidi või ajaveebi kaal on oluliselt suurenenud. Seega, mida rohkem lehti on saidil või ajaveebis sel ajal Google'i registris, seda rohkem otsinguliiklust võite saada. Muide, indekseeritud lehtede arv on üks parameetreid, mida Google selle määramisel arvesse võtab.

Kuidas kontrollida Google'i indekseeritud lehtede arvu

Minge Google'i otsingumootorisse või kui kasutate Google Chrome'i, siis lihtsalt kirjutage oma brauseri aadressiribale:

Sisestasin oma ajaveebi nime, teie sisestate saidi või ajaveebi nime, mida soovite kontrollida. Sisestage aadress kindlasti ilma "www"ta. Esiteks.
Ärge pange käärsoole järele tühikut!

Klõpsake nuppu "Otsi" ja Google kuvab oma registris lehtede loendi. Piisavalt lihtne!

Nüüd saate Google'is kontrollida oma ajaveebi või veebisaidi vahemällu salvestatud lehti.

Vahemälu on Google'i ajutine salvestusruum veebisaitide lehtede jaoks. Google'i ämblik külastab mis tahes veebisaiti, olenevalt värskendussagedusest minutist kuuni. Kui külastate veebisaiti, salvestab Google saidi sisu oma ajutisse salvestusruumi kuni teie järgmise külastuseni.

Kuidas kontrollida Google'is uusimat lehe vahemälu

Sisestage Google'i otsinguribale tagasi järgmine käsk:

Sisestasin oma ajaveebi avalehe aadressi, teie sisestate selle lehe nime, mida peate kontrollima. Tuletan teile veel kord meelde, ärge pange käärsoole järele tühikuid. Klõpsake "Otsi". Ja saate Google'i uusima vahemällu salvestatud lehe täpse kuupäeva ja kellaajaga, millal Google'i ämblik saiti külastas.

See on kõik, ma loodan, et tegin selgeks, kuidas määrata indekseeritud Google'i lehtede arv. Need on olulised punktid algajatele blogijatele ja veebimeistritele))) Pidage meeles, et indekseeritud lehtede arv võib tulemusi mõjutada. Mida rohkem kvaliteetseid lehti registris, seda parem. Kui ei, siis esitage küsimusi kommentaarides!

Mitmel põhjusel ei indekseeri otsingumootorid saidi kõiki lehti või, vastupidi, lisavad registrisse soovimatuid. Selle tulemusena on peaaegu võimatu leida saiti, millel on Yandexis ja Google'is sama arv lehti.

Kui lahknevus ei ületa 10%, siis kõik ei pööra sellele tähelepanu. Kuid see positsioon kehtib meedia- ja teabesaitide puhul, kui väikese osa lehtede kadumine ei mõjuta üldist liiklust. Kuid veebipoodide ja muude kaubanduslike saitide jaoks on tootelehtede puudumine otsingus (isegi üks kümnest) saamata jäänud tulu.

Seetõttu on oluline vähemalt kord kuus kontrollida lehtede indekseerimist Yandexis ja Google'is, võrrelda tulemusi, tuvastada, millised lehed otsingus puuduvad, ja tegutseda.

Probleem indekseerimise jälgimisega

Indekseeritud lehtede vaatamine pole keeruline. Seda saab teha aruannete üleslaadimisega veebihaldurite paneelidesse:

("Indekseerimine" / "Lehed otsingus" / "Kõik lehed" / "Laadi alla XLS / CSV tabel");

Tööriista võimalused:

indekseeritud lehtede samaaegne kontrollimine Yandexis ja Google'is (või ühes PS-is);
võimalus kontrollida kõiki saidi URL-e korraga ;
URL-ide arv ei ole piiratud.

Iseärasused:

töötage "pilves" - pole vaja tarkvara ega pistikprogramme alla laadida ja installida;
aruannete üleslaadimine XLSX-vormingus;
teade e-posti teel andmete kogumise lõppemise kohta;
aruannete säilitamine PromoPult serveris piiramatu aja jooksul.