19-11-2013, 15:33
De fleste forums mm. Kan man ikke rigtigt få adgang til uden at registrere sig....Men de tillader dog google bot!
Det vi gør er at vi på enten crome eller firefox henter "user agent"
Hent det og add det til din browser.
Nu gør følgende:
det skulle nu gerne se sådan her ud:
sæt nu google bot som dit bruger script
Det vi gør er at vi på enten crome eller firefox henter "user agent"
Hent det og add det til din browser.
Nu gør følgende:
Kode:
crawl-66-249-66-1.googlebot.com
Kode:
Googlebot/2.1
(+http://www.googlebot.com/bot.html)
sæt nu google bot som dit bruger script