De fleste forums mm. Kan man ikke rigtigt få adgang til uden at registrere sig....Men de tillader dog google bot!
Det vi gør er at vi på enten crome eller firefox henter "user agent"
Hent det og add det til din browser.
Nu gør følgende:

det skulle nu gerne se sådan her ud:

sæt nu google bot som dit bruger script

Super fed guide, kommer jeg nok til at bruge et par gange ;)

Man kan også i mange tilfælde bare skrive cache:https://www.shellsec.pw/showthread.php?tid=1187&pid=9673 på Google og så kommer man ind på deres cachede kopi der netop er gemt vha. deres crawler bot :)

Det er dumt at indeksere noget som folk ikke må se, men hvis det bare kræver registrering så er det for mig ikke sværere end at lave en autofill og så udfylde en captcha.

Nice! Tak for det lycia! Skal jeg lige have sat op ;)

Så lidt drenge! :D havde endelig tænkt på at lave det længe men ja...

De fleste kloge mennesker benytter også Googles IP Range når de laver disse tjeks :b Men det altid mange dumme mennesker selvfølgeligt.