Hva er robot meta-tags?

Robots meta-direktiver (noen ganger kalt «meta tags») er deler av koden som gir søkeroboter instruksjoner for hvordan å gjennomgå eller indeks web-innhold på siden. Mens roboter.txt-fil direktiver gi roboter forslag for hvordan til å gjennomgå et nettsted sider, robots meta-direktivene gir mer fast instruksjoner om hvordan å gjennomsøke og indeksere en side innhold.,

Det er to typer robots meta-direktiver: de som er en del av HTML-siden (som meta robotstag) og de som sender webserveren som HTTP-hoder (for eksempel x-robots-tag). De samme parametrene (dvs., den krypende eller indeksering instruksjoner for en meta tag gir, slik som «noindex» og «nofollow» i eksempelet ovenfor) kan brukes både med meta roboter og x-robots-tag; hva er forskjellig er hvordan disse parametrene er kommunisert til søkeroboter.,

Meta-direktivene gir søkeroboter instruksjoner om hvordan du gjennomsøker og indekserer informasjonen de finner på en bestemt nettside. Hvis disse direktivene er oppdaget av roboter, deres parametere tjene som sterk forslag til crawler indeksregulering atferd. Men som med roboter.txt-filer, søkerobotene ikke trenger å følge med på meta-direktiver, så det er et trygt bet at noen ondsinnet web-roboter vil ignorere dine direktiver.,

Nedenfor, er parametrene som søkemotor robotsøkeprogrammer forstå og følge når de er brukt i robots meta-direktivene. Parametrene er ikke case-sensitive, men gjør oppmerksom på at det er mulig noen søkemotorer kan bare følge et delsett av disse parameterne eller kan behandle noen direktiver på en litt annen måte.

Indeksregulering-kontrollerende parametere:

  • Noindex: Forteller om en søkemotor for ikke å indeksere en side.

  • Index: Forteller søkemotorer til å indeksere en side. Merk at du ikke trenger å legge til meta tag; det er standard.,

  • Følg: Selv om siden ikke er indeksert, crawleren bør følge alle linkene på en side og pass egenkapital til de koblede sidene.

  • Nofollow: Forteller om en søkerobot ikke å følge alle linkene på en side eller gi noen link egenkapital.

  • Noimageindex: Forteller om en søkerobot ikke å indeksere alle bilder på en side.

  • Ingen: det samme som å bruke både noindex og nofollow tags samtidig.

  • Noarchive: søkemotorene skal ikke vise en bufret link til denne siden på en SERP.,

  • Nocache: Samme som noarchive, men kun brukes av Internet Explorer og Firefox.

  • Nosnippet: Forteller om en søkemotor for ikke å vise et utdrag av denne siden (dvs. meta description) på denne siden på en SERP.

  • Noodyp/noydir : Forhindrer at søkemotorer fra å bruke en side DMOZ beskrivelse som SERP teksten på denne siden. Imidlertid, DMOZ ble avviklet i begynnelsen av 2017, noe som gjør denne tag-en foreldet.

  • Unavailable_after: søkemotorene skal ikke lenger indekserer denne siden etter en bestemt dato.,

Typer robots meta-direktiver

Det er to hovedtyper av robots meta-direktiver: de robots meta-tag, og x-robots-tag. Alle parameter som kan brukes i en meta-robots-tag-en kan også være angitt i en x-robots-tag.

Vi vil snakke om både meta roboter og x-robots-tag-direktivene nedenfor.,i sidens HTML-koden vises som kode-elementer i en web-side er <head> – delen:

Kode eksempel:

<før><meta name=»robots» content=»»></pre>

Mens den generelle <meta name="robots" content=""> – tag-er standard, kan du også gi direktiver til bestemte kryp ved å erstatte «roboter» med navnet på en bestemt user-agent., For eksempel vil målrette mot et direktiv spesielt til Googlebot, vil du bruke følgende kode:

<meta name="googlebot" content="">

Ønsker å bruke mer enn ett direktiv på en side? Så lenge de er rettet mot den samme «robot» (user-agent), flere direktiver kan være inkludert i en meta-direktiv – bare skille dem med komma. Her er et eksempel:

<meta name="robots" content="noimageindex, nofollow, nosnippet">

Denne taggen ville fortelle roboter ikke å indeksere noen av bildene på en side, kan du følge noen av linkene, eller vise et utdrag av en side når det vises på en SERP.,

Hvis du bruker forskjellige robots meta tag direktiver for ulike søk på bruker-agenter, vil du trenger å bruke separate koder for hver bot.

X-robots-tag

Mens robots meta tag lar deg kontrollere indeksering oppførsel på side nivå, x-robots-tag kan være inkludert som en del av HTTP-header til å styre indeksering av en side som helhet, så vel som svært spesifikke elementer på en side.,

Mens du kan bruke x-robots-tag for å utføre alle av samme indeksregulering direktiver som meta roboter, x-robots-tag-direktivet har betydelig mer fleksibilitet og funksjonalitet som meta-robots-tag ikke. Spesielt, x-roboter tillater bruk av regulære uttrykk, utfører gjennomgå direktiver om ikke-HTML-filer, og anvende parametre på et globalt nivå.

for Å bruke x-robots-tag, vil du trenger å ha tilgang til nettstedet ditt er overskriften .php, .htaccess, eller server access-fil., Derfra kan du legge til dine spesifikke server configuration ‘ s x-robots-tag-koding, inkludert eventuelle parametere. Denne artikkelen gir noen gode eksempler på hva x-robots-tag markup ser ut som om du bruker noen av disse tre konfigurasjoner.,Her er noen bruksmåter for grunnen til at du kan ansette x-robots-tag:

  • Kontrollere indeksregulering av innhold som ikke er skrevet i HTML (som flash eller video)

  • Blokkere indeksregulering av et bestemt element på en side (for eksempel et bilde eller en video), men ikke av hele siden i seg selv

  • Controlling indeksregulering hvis du ikke har tilgang til en side i HTML (spesifikt, til <head> – delen) eller hvis nettstedet ditt bruker en global overskrift som ikke kan endres

  • å Legge til regler til hvorvidt en side bør bli indeksert (ex., Hvis en bruker har kommentert over 20 ganger, indeksere profilen sin side)

SEO beste praksis med robots meta-direktiver

  • Alle meta-direktiver (roboter eller på annen måte) er oppdaget ved en URL er gjennomsøkt. Dette betyr at hvis en roboter.txt-fil forbyr URL fra å gjennomsøke, noen meta-direktivet på en side (enten i HTML-eller HTTP-header) ikke vil bli sett, og vil effektivt, bli ignorert.

  • I de fleste tilfeller, ved hjelp av en meta-robots-tag med parametere «noindex, følg» skal bli ansatt som en måte å begrense krabbe eller indeksregulering i stedet for å bruke roboter.,txt-fil forbyr.

  • Det er viktig å merke seg at skadelig søkerobotene er sannsynlig å fullstendig ignorere meta-direktivene, og som sådan, denne protokollen gjør ikke en god mekanisme. Hvis du har privat informasjon som du ikke ønsker å gjøre offentlig søkbare, velge en mer sikker tilnærming, for eksempel passord-beskyttelse, for å holde besøkende fra visning av konfidensielle sider.

  • Du trenger ikke å bruke for både meta roboter og x-robots-tag-en på samme side – ved å gjøre det ville være overflødige.

Holde læring

  • Roboter.,txt
  • X-Robots-Tag: Et Enkelt Alternativ For Roboter .txt og Meta Tag
  • Controlling Søkemotor Robotsøkeprogrammer for Bedre Indeksregulering og Rangeringer
  • Robots Meta Tag og X-Robots-Tag HTTP Header Spesifikasjoner

Sette dine ferdigheter til å jobbe

Moz Pro lar deg kjøre gjennomsøker, forskning og rapportere på søkeordet ranking, og spore ditt nettsted SEO-ytelse, inkludert dens tilgjengelighet, over tid. Prøv det >>