Nordlys Marketing
  • FORSIDE
  • SPECIALER
    • Online markedsføring
      • Søgemaskineoptimering (SEO)
      • Google Ads annoncering
      • Webshop markedsføring
      • Social markedsføring
      • Logo
    • Hjemmesider
      • Ny hjemmeside
      • Optimering af hjemmeside
      • Analyse af hjemmeside
      • Vedligeholdelse af hjemmeside
    • Konsulentydelser
      • AdWords-konsulent
      • Analytics-konsulent
      • SEO-konsulent
      • Online marketingkonsulent
    • Udvikling og support
      • Backup af hjemmeside
      • Flytning af hjemmeside
      • Gendan hjemmeside
      • Hjemmesideudvikling
      • Hjælp til hjemmeside
      • Optimering af hjemmeside
  • KURSER
    • Google Ads
    • Google Analytics
    • SEO
    • Digital markedsføring
    • WordPress
  • BLOG
  • REFERENCER
  • OM OS
    • Om os
    • Viden
    • Priser og samarbejde
    • Handelsbetingelser
    • Privatlivspolitik
    • Jobs
  • KONTAKT
  • BESTIL TILBUD
Vælg en side

Robots.txt

Du er her: Hjem » Ordbog » Robots.txt

Hvad er robots.txt?

Der kan være dele af en hjemmeside, man ikke ønsker skal være tilgængeligt for en søgemaskine. Dette er f.eks. hvis man har såkaldt ”duplicate content”, hvor man har samme indhold flere steder på en hjemmeside. Da dette kan påvirke ens rangeringer i negativ grad, kan det være en god idé at forhindre søgemaskinerne i at crawle de dele, der også står andre steder på en hjemmeside.

For at blokere søgemaskinerobotterne fra at læse de sider, man ikke ønsker, de skal læse, kan man benytte sig af robots.txt. Førnævnte er en fil i txt-format, der uploades i roden i et webhotel. Filen angiver for søgemaskiner, hvilket indhold den ikke må crawle på en hjemmeside. Hvis man ikke ønsker, at søgemaskiner som Google skal læse dele af ens hjemmeside, skal man derfor placere denne txt-fil på de sider, hvis indhold ikke må tilgås.

Derfor er det vigtigt for søgemaskiner først og fremmest at undersøge, om der findes en robots.txt. Grunden til dette er, at den i så fald vil manøvrere som den får besked på fra denne fil.

Udover at stoppe søgemaskiner fra at læse sider, kan robots.txt også forhindre søgemaskinernes adgang til scripts, værktøjer og andet programmæssig kode. Derudover kan man også benytte filen til at hjælpe søgemaskiner med at lokalisere et XML sitemap.

Man skal være varsom med at blokere for søgemaskiner, da man hurtigt kan komme til at spærre adgangen for søgerobotterne på hele ens hjemmeside, så intet indhold bliver læst. Der er en udbredt misforståelse om, at robots.txt kan stoppe søgemaskinernes robotter fra at indeksere dele eller hele hjemmesider.

Førnævnte fil kan kun stoppe søgerobotter fra at crawle. Hvis man ønsker at stoppe søgemaskinerne fra at indeksere ens indhold, skal man holde sig fra at bruge robots.txt og i stedet benytte sig af Meta robots-tagget.

Ordbog

  • 200 OK
  • 301 Redirect
  • 302 Redirect
  • 404 Fejl
  • Above the fold
  • Affiliate Marketing
  • Ajax
  • AMP
  • Ankertekst
  • Backlink
  • Bounce Rate
  • CMS
  • Content Marketing
  • Cookie
  • Google
  • Google Analytics
  • H-tags
  • HTML
  • HTTP og HTTPS
  • Htaccess
  • Indgående links
  • Java
  • JavaScript
  • Keyword
  • Linkbuilding
  • Linkjuice
  • Meta description
  • Off page SEO
  • On page SEO
  • Organiske søgeresultater
  • Organisk trafik
  • ROAS
  • SEO
  • Søgeordsanalyse
  • Udgående links
  • Usability
Tilbage til ordbogen

GRATIS POTENTIALEANALYSE 

Bestil analyse af jeres hjemmesides synlighed

Analysen udarbejdes manuelt med skræddersyede anbefalinger og fremsendes på mail

Valgfrit: Ønsker særligt fokus på

KONTAKT

Nordlys Marketing

Tlf: 60 72 05 60
[email protected]

Strandvejen 125
2900 Hellerup

CVR: 36 60 94 35

SPECIALER

  • Online markedsføring
  • Søgemaskineoptimering (SEO)
  • Google Ads annoncering
  • Ny hjemmeside
  • Kurser
  • Konsulentydelser
  • Support

OM OS

Vi er et online marketing bureau med benene på jorden og et stort fokus på service og kvalitet.

  • Følg
  • Følg
  • Følg

NYESTE INDLÆG

Apples iOS 15 opdatering

Apples iOS 15 opdatering

ÅBNINGSTIDER

Mandag:   09:00 – 16:30
Tirsdag:     09:00 – 16:30
Onsdag:    09:00 – 16:30
Torsdag:    09:00 – 16:30
Fredag:      09:00 – 15:30
Lør./Søn.:   Lukket