Har du søgt efter din hjemmeside online uden at finde den nogen steder? Hvis din hjemmeside ikke vises på Google eller en anden søgemaskine, er årsagen næsten altid et af nogle få velkendte problemer med indeksering, og de fleste kan løses uden teknisk baggrund. Her forklarer vi, hvad det betyder, at en hjemmeside ikke vises i søgeresultaterne, hvad de mest almindelige årsager er, hvordan du tjekker, om din hjemmeside er indekseret, og hvad du kan gøre for at få dine sider fundet.
Det er værd at skille det her problem fra det bredere spørgsmål om trafik. Hvis du slet ikke vises i søgeresultaterne, ikke engang når du søger på dit eget navn, er det et problem med indeksering. Det betyder, at søgemaskinerne enten ikke har besøgt din hjemmeside endnu eller har fået besked på ikke at tage den med. Det er noget andet end at være indekseret, men ikke placere sig godt på konkurrenceprægede søgeord. Begge dele giver ingen trafik, men årsagerne og løsningerne er forskellige.
Hvad det betyder, når din hjemmeside ikke vises i søgeresultaterne
Søgemaskiner arbejder i to trin. Først besøger en crawler din hjemmeside og læser siderne. Derefter bliver siderne lagt i et indeks, en enorm database med indhold fra nettet, som søgemaskinen henter fra, når nogen søger. Hvis din hjemmeside slet ikke vises i søgeresultaterne, sker et af tre ting: crawleren har ikke besøgt din hjemmeside endnu, crawleren har besøgt den, men noget har blokeret den i at læse siderne, eller siderne er blevet læst, men markeret som ikke egnede til at komme i indekset.
Forskellen på ikke indekseret og ikke placeret godt har betydning, fordi løsningerne er helt forskellige. En hjemmeside, der ikke er indekseret, skal gøres tilgængelig for crawlere og indsendes til optagelse. En hjemmeside, der er indekseret, men ikke placerer sig, har brug for bedre indhold, mere relevante søgeord og eksterne links, der peger på den. Hvis du behandler et problem med placering som et problem med indeksering, eller omvendt, spilder du tid og får ingen resultater. Første skridt er altid at finde ud af, hvilken situation du faktisk er i.
Hvorfor din hjemmeside ikke vises i søgeresultaterne
Hvis en hjemmeside er lanceret for nylig eller for nylig har mistet trafik fra søgning, finder du bag problemet en af disse fem årsager. De gælder for alle de store søgemaskiner, fordi crawling og indeksering fungerer på samme måde, uanset hvilken søgemaskine du kigger på.
Din hjemmeside er ikke blevet crawlet endnu
Søgemaskinernes crawlere besøger ikke alle hjemmesider på nettet i realtid. De følger links fra side til side og planlægger nye besøg efter, hvor ofte en hjemmeside udgiver nyt indhold, og hvor mange andre hjemmesider der linker til den. En helt ny hjemmeside uden eksterne links og uden indsendt sitemap bliver måske ikke crawlet i uger eller måneder efter lanceringen.
Det er den mest almindelige grund til, at en ny hjemmeside ikke vises i søgeresultaterne, og den er også den mest harmløse. Der er ikke noget galt med hjemmesiden. Crawleren er bare ikke nået frem til den endnu. Hvis du indsender et sitemap i søgemaskinernes værktøjer for webmasters, bliver ventetiden væsentligt kortere, fordi du direkte fortæller søgemaskinen, at din hjemmeside findes, og hvor siderne er.
Din hjemmeside er sat til at blokere søgemaskiner
Alle hjemmesider har en fil, der hedder robots.txt, som fortæller crawlere, hvad de må og ikke må tilgå. Under udvikling og test er det almindelig praksis at tilføje en regel i den fil, der blokerer alle crawlere. Det forhindrer halvfærdige sider i at dukke op i søgeresultaterne, før hjemmesiden er klar. Problemet er, at den indstilling somme tider bliver stående, når hjemmesiden lanceres.
En robots.txt med linjen Disallow: / under User-agent: * betyder, at alle søgemaskinernes crawlere er blokeret fra alle sider på din hjemmeside. Udefra ser hjemmesiden helt normal ud. Et menneske, der besøger den, ser alt fint. Men ingen crawler kommer ind, så ingen sider bliver indekseret, og så kommer der ingen trafik fra søgning. Det er en af de årsager, der betyder mest og er lettest at overse, når en hjemmeside ikke vises i søgeresultaterne.
Tjek din robots.txt ved at gå til dindomæne.dk/robots.txt i en browser. Hvis den indeholder generelle regler om at blokere, så fjern dem eller ret dem, så der er adgang til crawling, og indsend derefter dit sitemap igen for at få en ny crawling.
Enkelte sider har en noindex-instruktion
Ud over robots.txt for hele hjemmesiden kan enkelte sider have instruktioner i deres HTML, som fortæller søgemaskinerne, at de ikke skal med i indekset. Det kaldes et noindex-tag.
Noindex-tags bruges med rette på sider, der ikke skal vises i søgeresultaterne, som loginsider, bekræftelsessider efter betaling og interne søgeresultater. Problemet opstår, når de kommer på sider ved en fejl. Det sker ved flytning af hjemmesider, ved skift af platform, eller når sider er bygget på skabeloner, der havde noindex som standard. Et noindex-tag på din forside eller dine vigtigste sider om ydelser forhindrer helt, at de sider vises i søgeresultaterne, uanset hvor godt indholdet er, og hvor mange links der peger på dem.
For at finde noindex-tags, der er kommet ved en fejl, skal du enten se i hver sides kildekode eller køre hjemmesiden igennem et crawlværktøj, som markerer sider med den instruktion.
Ingen eksterne links peger på din hjemmeside
Crawlere finder sider ved at følge links. En hjemmeside uden eksterne links, hvor ingen anden hjemmeside på nettet linker til den, er en ø. Crawleren kan kun nå den ved, at du direkte indsender et sitemap, eller ved at adressen allerede ligger i dens kø fra et tidligere besøg. For helt nye hjemmesider gør manglen på eksterne links det væsentligt langsommere at blive fundet og indekseret.
Eksterne links er også tegn på troværdighed. En hjemmeside uden links fra andre troværdige kilder ser fra søgemaskinens side ud som noget, der måske slet ikke er værd at indeksere. Det betyder ikke, at du skal have hundredvis af links, før din hjemmeside vises i søgeresultaterne. Selv et eller to links fra relevante, troværdige kilder kan gøre en mærkbar forskel for et nyt domæne. Hvis du vil se, hvordan trafik fra alle kilder påvirkes af det her problem, kan du læse artiklen om hvorfor din hjemmeside ikke får trafik.
Din hjemmeside er lanceret for nylig
Selv når alt er sat rigtigt op, tager det tid, før nye hjemmesider vises i søgeresultaterne. Crawling, indeksering og den første vurdering af placeringer tager alle tid. En hjemmeside, der lanceres i dag med en ren robots.txt, et indsendt sitemap, korrekte metatags og nogle få eksterne links, kan stadig gå fire til tolv uger, før dens sider vises i søgeresultaterne på nogen søgninger.
Det er ikke en fejl. Det er den normale rækkefølge. Tiden kan gøres kortere, men ikke fjernes. Det værste, du kan gøre, er at lave ændringer i ventetiden, som faktisk skaber problemer, og så ikke vide, om det fortsatte fravær i resultaterne skyldes den oprindelige forsinkelse eller et nyt problem fra ændringerne.
Sådan tjekker du, om din hjemmeside er indekseret
Den hurtigste måde at tjekke indekseringen på er at søge på dit domæne med operatoren site: i en af de store søgemaskiner. Skriv site:dindomæne.dk i søgefeltet og tryk enter. Hvis der dukker sider op fra din hjemmeside, er den indekseret. Hvis der ikke kommer noget, er din hjemmeside enten ikke indekseret eller kun delvist indekseret.
Et mere detaljeret tjek får du i søgemaskinernes værktøjer for webmasters. Her kan du se præcis, hvilke sider der er indekseret, hvilke der er crawlet, men ikke indekseret, hvilke der er blokeret af robots.txt eller noindex-tags, og hvilke der har fejl ved crawling. Rapporten om dækning i de værktøjer er den mest pålidelige måde at få det fulde billede af din indeksering. Den viser også manuelle indgreb mod din hjemmeside, som er en mere sjælden, men mere alvorlig grund til, at du ikke vises i søgeresultaterne.
I søgemaskinernes værktøjer for webmasters kan du også bede om indeksering af bestemte adresser, og det kan gå hurtigere for nyligt udgivne sider eller sider, der er rettet efter at have været blokeret.
Sådan får du din hjemmeside indekseret
Når du har fundet årsagen, er trinene enkle. De fleste problemer med indeksering har en direkte løsning, og resultaterne kan som regel ses inden for få uger efter ændringen.
Indsend et sitemap
Et sitemap er en fil, som regel i XML-format, der lister alle de sider, du vil have søgemaskinerne til at indeksere. At indsende det i værktøjerne for webmasters er den mest direkte måde at fortælle søgemaskinerne, at din hjemmeside findes, og at få dem til at crawle. Hvis din hjemmeside allerede er crawlet, men nogle sider mangler i indekset, kan et indsendt sitemap hjælpe med at få de sider vurderet.
Tjek, om din platform laver et sitemap automatisk og opdaterer det, når du udgiver nye sider. Hvis den gør, så kontrollér adressen på sitemappet (som regel dindomæne.dk/sitemap.xml) og indsend det i værktøjerne for webmasters. Om hvordan opdateringer af indhold påvirker din hjemmesides tilstand og synlighed kan du læse mere i artiklen om hvordan du opdaterer indholdet på din hjemmeside.
Fjern begrænsninger for crawling
Hvis din robots.txt blokerer crawlere, så ret den, så der er adgang. Ændringen virker, næste gang en crawler kommer forbi. Når du har rettet robots.txt, så bed om en ny crawling i værktøjerne for webmasters, så ændringen bliver opfanget hurtigt i stedet for at vente på det næste planlagte besøg.
Hvis enkelte sider har noindex-tags, som ikke skal være der, så fjern dem og bed om ny indeksering af de berørte sider i værktøjerne for webmasters. Sider, der ikke skal indekseres, som administrationssider, dubletter og sider med lav værdi, skal beholde deres noindex-tags.
Skaf mindst nogle få eksterne links
Selv et lille antal eksterne links til din hjemmeside hjælper på to måder: de giver crawlere en vej til at finde dine sider ved at følge links som normalt, og de viser søgemaskinerne, at din hjemmeside er en rigtig, aktiv tilstedeværelse på nettet. Start med de lettest tilgængelige kilder: relevante registre, brancheforeninger, samarbejdspartnere, leverandører eller medier i din branche, der linker videre til de brands, de nævner.
Du behøver ikke at bygge snesevis af links, før din hjemmeside vises i søgeresultaterne. For et nyt domæne er en håndfuld relevante, troværdige links nok til, at crawling og indeksering fungerer normalt.
Ret ødelagte sider
Sider, der giver fejlkoder, især 404-fejl for sider, der ikke findes mere, kan få crawlere til at nedprioritere et domæne, hvis der er mange af dem. Ret interne links, der peger på fjernede sider, sæt omdirigeringer op fra gamle adresser til de rigtige sider, og tjek, om der er sider på din hjemmeside, der giver fejl. En fuld gennemgang af, hvordan 404-fejl virker, og hvordan du retter dem, finder du i artiklen om hvad en 404-fejl er, og hvordan du retter den. Om det beslægtede problem med ødelagte links kan du læse artiklen om hvad ødelagte links er, og hvorfor de skader din hjemmeside.
Sådan håndterer WEMASY indeksering
WEMASY laver automatisk et sitemap for hver hjemmeside og opdaterer det, når sider udgives. Du kan indstille robots.txt i platformens indstillinger, så der ikke er risiko for, at en blokering fra udviklingen bliver aktiv efter lanceringen. Hver side har indstillinger for metatags, også mulighed for at sætte noindex på enkelte sider, hvor det er nødvendigt, direkte i sideeditoren uden kode.
Hvis du vil følge din indeksering, viser WEMASY's analytics data fra søgemaskinerne, så du kan se, hvilke sider der får organisk trafik, og finde sider, der er indekseret, men endnu ikke sender besøgende.
Se, hvad der er med, hos WEMASY's hjemmesidebygger, eller se planerne på siden med priser.
Ofte stillede spørgsmål
Hvor lang tid går der, før en hjemmeside vises i søgeresultaterne?
For en ny hjemmeside med indsendt sitemap og uden begrænsninger for crawling tager den første indeksering som regel en til fire uger. Fuld indeksering af alle sider og de første placeringer på dine søgeord tager som regel tre til seks måneder. Hjemmesider med flere eksterne links bliver crawlet oftere og indekseret hurtigere. Med WEMASY's hjemmesidebygger kan du sætte det op direkte på din hjemmeside.
Hvad er forskellen på at være indekseret og at have en placering i søgeresultaterne?
At være indekseret betyder, at din side er i søgemaskinens database og kan vises i resultaterne. Placering handler om, hvor din side vises, når nogen søger på et relevant ord. En side kan være indekseret, men ligge på side 10, hvor den ikke får nogen trafik af betydning. Indeksering er en forudsætning for at få en placering, men indeksering alene sikrer ikke synlighed.
Hvordan ved jeg, om min hjemmeside er indekseret?
Søg efter site:dindomæne.dk i en af de store søgemaskiner. Hvis der vises sider fra din hjemmeside i resultaterne, er den indekseret. For en mere detaljeret oversigt over, hvilke sider der er indekseret, hvilke der er blokeret, og hvilke der har fejl, kan du bruge søgemaskinernes værktøjer for webmasters. Rapporten om dækning giver det fulde billede.
Kan et noindex-tag komme på en side ved en fejl?
Ja. Noindex-tags kan komme på ved en fejl, når en hjemmeside flyttes, ved skift af platform, eller når sider laves ud fra skabeloner, hvor tagget var sat som standard. Det er et af de sværeste problemer at opdage, fordi siden ser helt normal ud for de besøgende. Kun en crawler eller en person, der ser i sidens kildekode, ville lægge mærke til det. En gennemgang med et crawlværktøj er den mest pålidelige måde at finde noindex-tags på hele din hjemmeside, som er kommet på ved en fejl.
Løser det indekseringen med det samme at rette en blokering i robots.txt?
Ikke med det samme. Når du har fjernet en blokering, skal du vente på den næste crawling. Hvis du indsender dit sitemap i værktøjerne for webmasters og beder om en crawling, går det væsentligt hurtigere. I de fleste tilfælde kommer crawlerne forbi inden for få dage til en uge efter anmodningen. Siderne begynder at dukke op i resultaterne, når de er crawlet og behandlet, og det kan tage nogle dage mere.
Min hjemmeside blev vist før, men er forsvundet fra søgeresultaterne. Hvad skete der?
En hjemmeside, der tidligere var indekseret og er forsvundet fra resultaterne, er en anden situation end en ny hjemmeside, der aldrig har været indekseret. De almindelige årsager er en ændring i robots.txt, der har indført en blokering, et noindex-tag, der er kommet på ved en fejl, et manuelt indgreb fra en søgemaskine på grund af brud på reglerne, et stort fald i signalerne om hjemmesidens kvalitet eller et domæne, der er udløbet og registreret igen, så autoriteten blev nulstillet. Brug værktøjerne for webmasters til først at tjekke for manuelle indgreb og fejl i dækning, for de finder de mest alvorlige årsager med det samme.