Hvordan finne ut hvor mange sider som er indeksert av Google. En rask måte å sjekke sideindeksering i Yandex og Google

Nylig på jobb kom jeg over en oppgave der det var nødvendig å sjekke et stort antall sider for indeksering i Yandex og Google. Du kan enkelt bruke betalte tjenester (for eksempel Topvisor), som vil gi all informasjon i en vakker form. Eller noen tjenester som lar deg sjekke kun 10 sider gratis, men det kan være mange slike sider, og betalte tjenester kan koste en god del. Du kan gjøre alt dette gratis, men for dette trenger vi Kay Collector.

Først av alt må vi forberede lenker, siden vi trenger forskjellige kommandoer for hver PS.

Bulklinksjekking i Yandex

For å sjekke inn Yandex, må du utarbeide en liste over lenker i følgende format:

vert:zamal.info/poleznye-seo-service/ | url: zamal.info/poleznye-seo-servisy/

vert:zamal.info/category/seo/| url:zamal.info/category/seo/

Masselinksjekking i Google

I Google vil alt være litt enklere:

nettstedet:zamal.info/poleznye-seo-service/

nettstedet:zamal.info/category/seo/

Hva er disse kommandoene til?

Mange sier kanskje, hvorfor ikke bare skrive inn lenkeadressen, for den vil umiddelbart vise enten en tom forespørsel eller denne lenken. Dessverre, det vil ikke fungere på den måten. Ja, i noen tilfeller vil dette fungere. Men i andre kan Yandex enkelt vise andre nettadresser som ikke er relatert til den vi skrev inn. Og Kay Collector vil gi oss informasjon om at siden din er i indeksen, selv om dette ikke er tilfelle.

Hvordan lage koblinger så massivt?

Sjekker sideindeksering ved hjelp av Key Collector

Etter å ha samlet 2 separate lister (eller en for å sjekke inn en spesifikk PS), åpne Key Collector. La oss lage et prosjekt. Vi går til innstillingene - parsing og i feltet "slett tegn" og "erstatt tegn med et mellomromstegn", slett alt som er der og lagre det.

Hvor lang tid tar prosessen?

Alt dette avhenger av antall lenker som kontrolleres. Det tok meg omtrent 12 timer å sjekke 10 000 sider

Setter opp eksport

Mens bekreftelsesprosessen pågår, kan du umiddelbart sette opp eksport. Gå til innstillinger - eksport. Nederst setter du bare et hake over "Phrase" og "Position" eller "Position [G]". Etter at prosessen er fullført, last opp alt til en xls-fil (klikk på det grønne ikonet øverst til venstre).

La oss se resultatet

Som et resultat får vi en tabell med to kolonner, som indikerer siden og plasseringen.

1 – i indeksen

-1 – ikke i indeksen

Da kan vi ganske enkelt filtrere ut ikke-indekserte sider og sende dem enten for ny gjennomgang (hvis det er få av dem), eller lage et eget nettstedkart for dem og også sende for ny gjennomgang (ved å legge det til webmaster).

Hvordan kan du raskt finne ut om en side som er viktig for deg er inkludert i søkemotorindeksen? Og generelt, hvor mange sider på et nettsted blir "sett" av søkemotorer? I dette innlegget beskrev jeg metodene som SEO-spesialister oftest bruker, og utarbeidet en bonus for leserne.

Når du indekserer en side, legger søkemotorroboten til informasjon om nettstedet til databasen. Videre søk skjer på indekserte sider. Ikke bland sammen indeksering og gjennomgang.

En robot kan gjennomsøke hele nettstedet raskt. Og det går tregt å legge til i indeksen, ikke legge til noen sider eller fjerne sider fra indeksen.

Vil du at alle sidene på nettstedet ditt skal indekseres raskt? Vi vil gi råd om den optimale SEO-kampanjestrategien:

1. Sjekk indeksering i nettredaktørpanelet

Dette er en grunnleggende bekreftelsesmetode for en nettredaktør eller nettstedeier.

Google. Du må gå til Search Console og på «Google Index»-fanen, velg «Indekseringsstatus».

Yandex. Vi går gjennom autorisasjon i Yandex.Passport, går til Yandex.Webmaster og følger stien "Site Indexing" - "Pages in Search". Et annet alternativ: "Nettstedindeksering" - "Historikk" - "Sider i søk". Her kan du se dynamikken i endringer i antall sider i søket.

For å bruke denne metoden må du ha et visst tilgangsnivå til nettredaktørpanelet. Et eksempel på god nettstedsindeksering. Antallet kvalitetssider vokser og de blir lagt til i indeksen.
Indekseringsproblemer ser slik ut:

Skjermbildet viser et nettsted som er stengt fra indeksering i robots.txt-filen

Logisk resonnement om emnet: "Hvordan sjekke hvor mange sider som er i søkemotorindeksen."

Og numeriske beregninger som viser hvordan jeg balanserte balansen ved å studere hva som var indeksert, hva som ikke var det og hvorfor.

Jeg bestemte meg for å se nærmere på dette og ordne opp i alt.

La oss se på eksemplet med Yandex og Google.

Problemet med indeksering, eller hva indekser er.

Problemet med indeksering bekymrer hele tiden eieren av ethvert nettsted. Når nettsider er inkludert i søkemotorindekser, sikrer dette stabil og, viktigst av alt, gratis trafikk. Sider deltar i søkeresultater, og besøkende søker selv etter informasjon og havner på nettstedet ditt. Dette er flott!

Vel, endelig begynner siden å bli indeksert stabilt.

Nå er eierne bekymret for at hver ny artikkel kommer inn i søket så raskt som mulig, og de drømmer om at siden vil bli besøkt av den såkalte "raske roboten".

For å gjøre dette, anbefales det å legge til informasjon på nettstedet ditt regelmessig og legge ut lenker til nye artikler på sosiale nettverk, spesielt.

Dette kan enkelt gjøres ved hjelp av .

Men livet går videre, algoritmer endres. Hvis nettstedet tidligere ble besøkt av en rask robot, og artikkelen havnet i Yandex-søk i løpet av noen timer, har mange nettredaktører nylig (november 2014) klaget over at det tar flere dager.

Jeg la også merke til at etter at jeg begynte å legge til informasjon på siden i Yandex webmastertjeneste før publisering (som spesialistene i denne søkemotoren sterkt anbefalte meg å gjøre), vises en ny artikkel bare i søket under de neste Yandex-søkeresultatene. Det går bare noen dager.

Det viser seg noe sånt som dette: teksten din er allerede i lommen vår, du kommer ikke unna oss uansett, og vi trenger ikke forhaste oss.

Hvordan kan du i dette tilfellet fastslå at artikkelen allerede er indeksert?

Jeg gjør dette ved hjelp av nettleserutvidelsen Google Chrome.

Jeg har den samme utvidelsen installert på Opera-nettleseren min. Den lar deg bestemme for enhver åpen side om den er indeksert eller ikke.

Slik legger du til en side i Google-indeksen selv.

Google er mer effektiv i denne saken. Den lar hvem som helst tvinge en ny side til å bli lagt til i indeksen. Det kan gjøres. Der må du først velge «View like Googlebot»-fanen, hvor du så har mulighet til å legge siden til indeksen selv hvis du spesifiserer dens URL.

Som de sier: det er bra for deg, og det er ikke dårlig for oss.

Du kan legge til opptil 500 sider per måned på denne måten.

Hva med de kvantitative indekseringsindikatorene for nettstedet?

Hvor mange sider er det i søkemotorindeksen?

Den enkleste måten å se dette på er i tjenestene for webansvarlige for søkemotorer.

La oss si at jeg har 106 artikler og 10 sider på nettstedet mitt (dette kan sees i nettstedets administrative panel) pluss startsiden eller nyhetsstrømmen. Da er det enkelt å beregne (106+10+1=117). Dette betyr at det vil være totalt 117 URL-er på nettstedskartet.

Forresten, der kan du se indikatorene for den ekstra og viktigste Google-indeksen for nettstedet hans. Med ham viste de seg å være mye nærmere hverandre.

Akk, det er mye snørr på WordPress-bloggen min.

Eh, vi må lære å lage nettsider på et mer profesjonelt nivå. I stedet for å bruke ferdige maler...

Det viser seg at sider må bygges på en slik måte at det ikke er duplikatinnhold på dem og alle lenkene til sidene der blir umiddelbart brukt, dvs. til hovedindeksen.

Kanskje WordPress en dag vil vokse til dette nivået.

I mellomtiden viser det seg at dersom du bruker korte lenker til sider, bidrar ikke dette til SEO (optimalisering). Og bruker du CNC-lenker får du duplisert innhold.

Jeg ser frem til kommentarene dine.

Hvilke tanker gjorde du deg om dette?

Vi har gitt ut en ny bok, Social Media Content Marketing: How to Get Inside Your Followers' Heads and Make Them Fall in Love with Your Brand.

Nettstedindeksering er prosessen med å søke, samle inn, behandle og legge til informasjon om et nettsted i en søkemotordatabase.

Flere videoer på kanalen vår - lær internettmarkedsføring med SEMANTICA

Indeksering av et nettsted betyr at en søkemotorrobot besøker ressursen og dens sider, studerer innholdet og legger det inn i databasen. Deretter returneres denne informasjonen basert på nøkkelspørringer. Det vil si at nettverksbrukere skriver inn et søk i søkefeltet og mottar et svar i form av en liste over indekserte sider.

Enkelt sagt er det omtrent slik: hele Internett er et enormt bibliotek. Ethvert bibliotek med respekt for seg selv har en katalog som gjør det lettere å finne informasjonen du trenger. På midten av 90-tallet av forrige århundre ble all indeksering redusert til slik katalogisering. fant nøkkelord på nettsider og dannet en database fra dem.

I dag samler og analyserer bots informasjon basert på flere parametere (feil, unikhet, nytte, tilgjengelighet osv.) før de legger den inn i søkemotoren.

Søkerobotalgoritmer blir stadig oppdatert og blir mer komplekse. Databaser inneholder en enorm mengde informasjon, til tross for dette tar det ikke mye tid å søke etter nødvendig informasjon. Dette er et eksempel på indeksering av høy kvalitet.

Hvis nettstedet ikke er indeksert, kan det hende at informasjonen ikke når brukere.

Hvordan Google og Yandex indekserer nettsteder

Yandex og Google er kanskje de mest populære søkemotorene i Russland. For at søkemotorer skal indeksere nettstedet ditt, må du rapportere det. Du kan gjøre dette på to måter:

1. Legg til et nettsted for indeksering ved å bruke lenker på andre ressurser på Internett - denne metoden anses som optimal, siden sidene som ble funnet på denne måten anses som nyttige av roboten og indekseres raskere, fra 12 timer til to uker.
2. Send inn nettstedet ditt for indeksering ved å fylle ut et spesielt søkemotorskjema manuelt ved å bruke tjenestene til Yandex.Webmaster, Google Webmaster Tools, Bing Webmaster Tools, etc.

Den andre metoden er tregere; nettstedet er i kø og indeksert i to uker eller mer.

I gjennomsnitt blir nye nettsteder og sider indeksert i løpet av 1–2 uker.

Det antas at Google indekserer nettsteder raskere. Dette skjer fordi Googles søkemotor indekserer alle sider – både nyttige og unyttige. Imidlertid er det bare innhold av høy kvalitet som rangeres.

Yandex fungerer tregere, men indekserer nyttig materiale og ekskluderer umiddelbart alle søppelsider fra søket.

Indeksering av et nettsted fungerer slik:

• søkeroboten finner portalen og undersøker innholdet;
• informasjonen som mottas legges inn i databasen;
• om omtrent to uker vil materiale som har bestått indeksering vises i søkeresultatene på forespørsel.

Det er tre måter å sjekke indekseringen av et nettsted og dets sider i Google og Yandex:

1. bruke verktøy for nettredaktører - google.com/webmasters eller webmaster.yandex.ru;
2. ved å skrive inn spesielle kommandoer i søkefeltet, vil kommandoen for Yandex se slik ut: vert: nettstedsnavn + førstenivådomene; og for Google - nettsted: nettstedsnavn + domene;
3. ved hjelp av spesielle automatiske tjenester.

Sjekker indeksering

Dette kan gjøres ved å bruke:

1. søkemotoroperatører - se i hjelpen eller ;
2. spesielle tjenester, for eksempel rds bar;

Hvordan øke hastigheten på nettstedindeksering

Hastigheten som nytt materiale dukker opp i søkeresultatene avhenger av hvor raskt robotene utfører indeksering, og jo raskere kommer målgruppen til nettstedet.

For å øke hastigheten på indeksering av søkemotorer, må du følge flere anbefalinger.

1. Legg til et nettsted i en søkemotor.
2. Fyll prosjektet regelmessig med unikt og nyttig innhold.
3. Navigering rundt på nettstedet skal være praktisk, tilgang til sider bør ikke være lengre enn 3 klikk fra hovedsiden.
4. Plasser ressursen på rask og pålitelig hosting.
5. Konfigurer robots.txt riktig: eliminer unødvendige begrensninger, blokker tjenestesider fra å indeksere.
6. Se etter feil, antall søkeord.
7. Lag intern lenking (lenker til andre sider).
8. Legg ut linker til artikler på sosiale nettverk og sosiale bokmerker.
9. Lag et nettstedkart, eller til og med to, ett for besøkende og ett for roboter.

Hvordan blokkere et nettsted fra indeksering

Blokker et nettsted fra indeksering – nekt søkeroboter tilgang til nettstedet, noen av sidene, deler av teksten eller bildet. Dette gjøres vanligvis for å skjule sensitiv informasjon, tekniske sider, nettsteder på utviklingsnivå, dupliserte sider osv. fra offentlig tilgang.

Du kan gjøre dette på flere måter:

• Ved å bruke robots.txt kan du forhindre indeksering av et nettsted eller en side. For å gjøre dette opprettes et tekstdokument ved roten av nettstedet, som angir reglene for søkemotorroboter. Disse reglene består av to deler: den første delen (User-agent) indikerer mottakeren, og den andre (Disallow) forbyr indeksering av objekter.
  Et forbud mot indeksering av hele nettstedet for alle søkeroboter ser for eksempel slik ut:

Bruker agent: *

Ikke tillat: /

• Bruke robotens metatag, som anses som den mest korrekte måten å blokkere én side fra indeksering. Ved å bruke noindex- og nofollow-taggene kan du forhindre roboter fra noen søkemotorer i å indeksere et nettsted, en side eller en del av teksten.

En oppføring for å deaktivere indeksering av et helt dokument vil se slik ut:

Du kan opprette et forbud for en bestemt robot:

Hva påvirker indeksering under opprykk?

Takket være indeksering er nettsteder inkludert i søkemotoren. Jo oftere innholdet oppdateres, jo raskere skjer det, siden roboter kommer til nettstedet oftere. Dette resulterer i en høyere søkerangering.

Indeksering av nettstedet i søkemotorer gir en tilstrømning av besøkende og bidrar til utviklingen av prosjektet.

I tillegg til innhold evaluerer roboter trafikk og besøksatferd. Basert på disse faktorene trekker de konklusjoner om nytten av ressursen, besøker nettstedet oftere, noe som hever det til en høyere posisjon i søkeresultatene. Følgelig øker trafikken igjen.

Indeksering er en viktig prosess for å fremme prosjekter. For at indeksering skal lykkes, må søkeroboter sørge for at informasjonen er nyttig.

Algoritmene som søkemotorer bruker endrer seg stadig og blir mer komplekse. Hensikten med indeksering er å legge inn informasjon i søkemotordatabasen.