Ikke indeksert av google

Merkelig.

Jeg jobber med en ny side, og jeg vil ikke inn på
google før den er ferdig, men jeg er inne nå uten en
eneste innlenke.

Litt urettferdig at de som vil inn på google, ikke kommer
inn (med en gang) mens de som ikke vil inn, er der
med en gang.

Jeg har en misstanke om at det er google toolbar som fikk
meg inn. Jeg prøvde å se om google hadde indeksert siden
min ved å sjekke "Bufret side" via google toolbar. Det hadde
den ikke. Men to dager etter prøvde jeg igjen, og da var
den inne.

Jeg vet ikke om dette er riktig, men det er den eneste grunnen
jeg kommer på. Men om dette er grunnen, er det jo en enkel måte
å få indeksert sider på.
 

zapotek

Medlem
Lokalstarten: Det var ikke en Wordpress side vel? Husk at du "pinger" automatisk når du legger inn nye innlegg, og blir indexert på den måten. pingomatic.com ligger inn som standard når du installerer Wordpress.
 

onlyme

New Member
Merkelig.

Jeg jobber med en ny side, og jeg vil ikke inn på
google før den er ferdig, men jeg er inne nå uten en
eneste innlenke.

Litt urettferdig at de som vil inn på google, ikke kommer
inn (med en gang) mens de som ikke vil inn, er der
med en gang.

Jeg har en misstanke om at det er google toolbar som fikk
meg inn. Jeg prøvde å se om google hadde indeksert siden
min ved å sjekke "Bufret side" via google toolbar. Det hadde
den ikke. Men to dager etter prøvde jeg igjen, og da var
den inne.

Jeg vet ikke om dette er riktig, men det er den eneste grunnen
jeg kommer på. Men om dette er grunnen, er det jo en enkel måte
å få indeksert sider på.

Hvis du ikke vil inn på google laster du bare opp en notepad i roten som
du kaller robots med dette innhold:

User-agent: Mediapartners-Google* Disallow:
 

picxx

Well-Known Member
Hvis du ikke vil inn på google laster du bare opp en notepad i roten som
du kaller robots med dette innhold:

User-agent: Mediapartners-Google* Disallow:

Mediapartners er googles adsense spider, så om du ikke vil bli indeksert må du nok bruke Googlebot og ikke Mediapartners-Google.
 

onlyme

New Member
Mediapartners er googles adsense spider, så om du ikke vil bli indeksert må du nok bruke Googlebot og ikke Mediapartners-Google.

Vel! Her er den jeg bruker for å holde de unna saker å ting jeg ikke vil ha ut:

User-agent: Googlebot
Disallow: /
User-agent: Mediapartners-Google
Disallow: /
User-agent: Adsbot-Google
Disallow: /
User-agent: Jeeves
Disallow: /
User-agent: Slurp
Disallow: /
User-agent: Yahoo-MMCrawler
Disallow: /
User-agent: msnbot
Disallow: /
User-agent: psbot
Disallow: /
User-agent: *
Crawl-delay: 60.00
Disallow: /*.gif$
Disallow: /*.Gif$
Disallow: /*.GIF$
Disallow: /*.jpg$
Disallow: /*.Jpg$
Disallow: /*.JPG$
Disallow: /*.jpeg$
Disallow: /*.Jpeg$
Disallow: /*.JPEG$
Disallow: /*.pdf$
Disallow: /*.Pdf$
Disallow: /*.PDF$
Disallow: /*.zip$
Disallow: /*.Zip$
Disallow: /*.ZIP$

Og den er i allefall rett.
 

onlyme

New Member
Ja, du har jo Googlebot på toppen der :)

jada! Kan bare legge til at koden over fungerer slik at de navngitte søkemotorene er blokkert fra alt innhold i katalogen. Alle øvrige søkemotorer
som ikke er navngitt må ta pause 60 sek eller 60 min (spiller ingen rolle) mellom vær spørring. Filene som er navngitt er sperret for alle søkemotorer, ikke bare de navngitte.

Var i allefall det som var meningen:)
 
Sist redigert:
Topp