Søkemotoroptimalisering

Robots.txt

En viktig del av søkemotoroptimaliseringen er å fortelle spideren (agenten) til søkemotorene hva den kan indeksere på et nettsted og hva du ikke ønsker at den skal indeksere.

Typiske sider eller kataloger man ikke ønsker at søkemotorene skal indeksere er ting som er internt i et selskap.

Husk at hackere og andre kan sjekke denne filen, så ikke avslør et område som for eksempel ikke er passordbeskyttet.

Ressurser om dette tema

Search Engine World: Robots.txt Tutorial
Search Engine World: Robots.txt validator
Wikipedia: http://en.wikipedia.org/wiki/Robots.txt

Nyttige forum tråder:

WebMasterWorld: Robots.txt og dynamiske filer (php?value)

Blogg poster om Robts.txt

GoogleGuys Explains Robots.txt Handling - http://www.seroundtable.com/archives/005114.html

Tema

Lenkebygging

Søkemotoroptimalisering

FAQ

Robots.txt

Webhotell

Nyttige lenker

Nettskriving
SEO Forum

Verktøy

Link Harvester
NicheBot WordTracker