Når du driver et nettsted, vil du at det skal rangeres så høyt som mulig på søkemotorresultatsidene (aka SERPs). For å oppnå dette målet, må du bruke alle optimaliseringsteknikkene i arsenalet ditt og gjøre ditt beste for å komme opp med innovative måter å overbevise søkemotorer om at innholdet ditt er relevant og verdifullt.
Prosessen med å få nettstedet ditt til toppen av SERP-er starter med indeksering av de enkelte sidene. Å la roboter få tilgang til innholdet ditt betyr at sidene dine er klare til å deles med verden.
Du kan selvfølgelig alltid låse sidene dine med et passord hvis du ikke vil at brukerne skal få tilgang til dem. Det vil imidlertid ikke skjule disse sidene fra søkemotorer.
Men når sant skal sies, er det mange ganger det er bedre å ikke indeksere en side i WordPress. Og for å skjule det fra søkemotorer, må du instruere dem om ikke å indeksere det. Dette gjøres ved å bruke noindex-direktivet, som lar roboter gjennomsøke en side, men hindrer dem i å rangere den.
I denne artikkelen lærer vi mutterne og boltene for hvordan du ikke kan indeksere en side i WordPress, og vi vil oppdage:
La oss nå komme i gang.
Selv om dette kan virke rart, er det noen ganger helt rimelig å ikke indeksere en side i WordPress. Faktisk vil vi gi deg 6 grunner til at det kan være riktig å gjøre.
1. Personvern
Du vil ikke dele sider som inneholder sensitiv informasjon, konfidensielle detaljer eller brukernes personlige opplysninger og kontaktinformasjon med publikum.
2. Duplisert innhold
Hvis du publiserer innholdet ditt i flere formater (for eksempel Adobe PDF eller utskriftsvennlige versjoner), anbefaler vi deg å vis bare én versjon til søkemotorer for å unngå problemer med duplisert innhold. Videre, hvis du driver et e-handelsnettsted, du bør alltid skjule sidene som har lignende eller identiske produktbeskrivelser (i tilfelle bare produktstørrelsene eller fargene varierer, for eksempel).
3. Problemer med søkeordkannibalisering
Hvis du målretter mot ett søkeord på tvers av flere sider eller innlegg på nettstedet ditt, kan det hende at siden du anser som den mest relevante for et spesifikt søk, ikke er den som rangeres høyest i søkemotorene. For å unngå dette problemet, aktiver kun indeksering for sidene som er de viktigste og mest relevante for spesifikke søkeord.
4. Lite eller ingen brukerverdi
Takk skal du ha sider, administratorpåloggingssider og lignende typer sider er ikke så viktige for brukere, så det er ikke så nødvendig å ha dem rangert i søkemotorresultatene. De har ingen reell verdi for besøkende på nettstedet ditt, og du trenger ikke at de mottar organisk trafikk.
5. Arbeid i gang
I tilfelle din sider og innlegg er under utvikling, bør du skjule dem fra søkeroboter til du perfeksjonerer dem etter din smak.
6. Tredjepartsinnhold
Hvis nettstedet ditt har annonser og lignende innhold som genereres av tredjepartskilder, bør du skjule det fra søkemotorer. Den typen innhold har vanligvis ingenting å gjøre med hovedformålet med nettstedet ditt.
Greit, så vi vet i hvilke tilfeller vi bør skjule en WordPress-side eller et innlegg fra søkemotorer. Nå er det på tide at vi lærer hvordan vi gjør det.
Å skjule innholdet ditt fra søkemotorer ved å bruke Yoast SEO er det enkleste alternativet å følge, uavhengig av nivået på WordPress-ferdighetene dine.
For å bruke denne metoden må du installere og konfigurere Yoast-plugin. Fra WordPress-dashbordet får du deretter tilgang til innlegget eller en side du vil skjule og se etter Yoast SEO-metaboksen (den bør være rett under sideredigering). Nå, klikk på Avansert.
Flere alternativer vil dukke opp, men vi er interessert i de to øverste. Den første lar deg hindre søkemotorer i å vise siden din i søkeresultatene, og den andre hindrer søkemotorer i å følge koblinger på siden din.
Legger til ingen følgere tag til siden din er vanligvis ikke nødvendig. Du kan bruke den i tilfelle det er det betalte lenker på siden din eller brukerinnsendte lenker i kommentarfeltet. Førstnevnte er sponset innhold og er imot Googles retningslinjer for nettredaktører. Når det gjelder sistnevnte, er problemet at du aldri kan vite hvor pålitelige brukernes lenker er, og det er derfor det kan være best å hindre roboter i å følge dem.
Bortsett fra det er det nok å sette sidene dine til noindex, for å holde dem utenfor søkeindeksen.
Når du er ferdig med å gjøre endringer i Yoast, ikke glem å lagre dem.
Denne metoden anbefales ikke for WordPress-nybegynnere siden den krever at du endrer robots.txt-filen.
For å få tilgang til filen, koble til serveren din via FTP eller bruk Filbehandler i cPanelen din.
En annen måte å få tilgang til robots.txt-filen på er å bruke Yoast SEO-plugin. Gå til SEO > Verktøy og velg Filredigering.
Hvis du har robots.txt-filen, vises den øverst. Hvis du ikke gjør det, kan du lage en selv. Google har en flott artikkel om hvordan lage en robots.txt-fil. For å skjule en side fra søkemotorer via robots.txt-filen, legg til følgende kodelinjer i filen:
User-agent: * Disallow: /the-URL-of-your-page/
Den første linjen med kode refererer til spesifikke roboter og søkemotorer du kanskje ønsker å målrette mot. For å inkludere alle søkemotorer, bruk en stjerne, akkurat som vi gjorde. Sett inn nettadressen til siden du vil skjule i den andre kodelinjen, men sørg for å ekskludere nettstedets domenenavn.
Hvis for eksempel nettadressen til siden din er «http://aweekendinthecity.com/2020/music/indie-rock» du ville satt:
User-agent: * Disallow: /2020/music/indie-rock/
Når du er ferdig, kan du test robots.txt-filen, bare for å være sikker på at du har satt opp alt riktig. Og hvis du nettopp har opprettet filen, sørg for at du laster den opp til rotkatalogen på nettstedet ditt.
Risikoen ved å bruke robots.txt-filen til å skjule innhold fra søkemotorer
Bortsett fra å ikke være helt nybegynnervennlig, har denne metoden noen risikoer, og det er grunnen til at vi ikke er dens største fans.
robots.txt-filen er en konfigurasjonsfil som forteller søkemotorsøkeprogrammer om de skal få tilgang til sidene og innleggene dine eller ikke. Men ikke alle søkemotorer følger forespørslene til denne filen. Det er mulig siden din fortsatt vil vises i søkeresultater, bare uten noen metabeskrivelse. Videre, hvis et annet nettsted peker til ditt med beskrivende tekst, vil siden din bli indeksert (selv om du bare har lyd- og/eller videoinnhold på den). I tillegg ignorerer ondsinnede roboter og innholdsskrapere vanligvis filen.
Robots.txt-filen er også offentlig tilgjengelig. Dette betyr at alle kan se det og enkelt oppdage sidene du ønsker å skjule.
En annen måte å skjule siden din for søkemotorer på er ved å legge til en noindex-metakode i HTML-filen på siden din eller ved å inkludere en noindex-header i HTTP-svarhoder. For at dette skal fungere, insisterer Google på at du ikke blokker siden din med en robots.txt-fil ellers vil søkemotorroboter ikke engang se noindex-direktivet.
Hvordan legge til ‘noindex’-direktivet som en metakode
For å instruere alle søkemotorer om ikke å indeksere WordPress-siden din, legg til noindex-metakoden i HTML-en <head> del av en gitt side:
<meta name="robots" content="noindex" />
Å forhindre bare Googlebot fra å gjennomsøke siden din, bruk denne taggen:
<meta name="googlebot" content="noindex" />
NB Selv etter at du har endret denne delen og lagt til noindex-metakoden til den, kan enkelte søkemotorer fortsatt gjennomsøke siden din.
Slik legger du til ‘noindex’-direktivet i HTTP-responshodet
For å instruere søkemotorer om ikke å indeksere siden din, kan du også bruke X-Robots-taggen og legge til følgende HTTP-svar til header.php-filen:
header("X-Robots-Tag: noindex", true);
Hvis du vil stoppe roboter fra å følge koblingene på siden din også, kan du gå med dette HTTP-svaret:
header("X-Robots-Tag: noindex, nofollow", true);
Alle direktivene du kan bruke i en robots-metatag kan også brukes på en X-Robots-Tag. Men sistnevnte er mye mer fleksibel. Faktisk, X-Robots-Tag kontrollerer indeksering av både en side som helhet og spesifikke elementer på en side, mens en robot-tag lar deg administrere indeksering kun på sidenivå. For eksempel, hvis du ønsker å stoppe søkemotorsøkeprogrammer fra å indeksere bare et bilde eller en videofil, må du bruke X-Robots-Tag.
Hvilken metode bør du velge?
Når alt er sagt og gjort, Vi anbefaler å bruke Yoast SEO-plugin for å lykkes med å ikke indeksere en side i WordPress. Det er enkelt og effektivt. Det kreves ingen avansert ekspertise for å bruke den. I tillegg vil ikke endringene du gjør med Yoast påvirke rotkatalogen til nettstedet ditt.
Men hvis du ønsker det, eksperimenter med andre alternativer også. Til syvende og sist er alt som betyr noe at du lykkes med å forhindre søkemotorer fra å få tilgang til og indeksere WordPress-siden eller innlegget ditt ved å bruke den metoden du føler deg mest komfortabel med.
Støtt vårt arbeid ❤️
Hvis du likte denne artikkelen, vurder å gi en tips for å hjelpe oss med å fortsette å publisere kvalitetsinnhold.
