Sivun piilottaminen hakukoneilta

Miten piilotetaan sivu hakukoneilta?

Yritän ratkaista tuon toisen sivun kautta kirjautuminen -ongelman nyt tavallisilla linkeillä, mutta siinä tapauksessa jäsensivut pitäisi piilottaa hakukoneilta - muistan, että tämän pitäisi olla mahdollista: mutta miten?

Sivustolla on siis julkinen sivu, jonka pitää näkyä hakukoneille sekä jäsensivu, joka pitäisi piilottaa hakukoneilta, jotta sen ei tarvitsisi vaatia toiselta sivustolta tulevilta kirjautumista.

Jos sinne jäsensivulle ei ole missään julkista linkkiä niin ei hakukoneet sitä löydä.

Yksi tapa on myös robots.txt tiedostoon asettaa Disallow asetuksellä jäsensivun juuri jolloin google, bing ynnä muut hakukoneet jättää jäsensivut crawlaamatta.

Eli:

Disallow: /jäsenkansionosoite-tähän/