Comments on: Mikä ihmeen robots.txt ? http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html Asiantuntevia neuvoja ja vihjeitä kotisivujen hakukoneoptimointiin Mon, 21 Jul 2008 01:23:26 +0000 http://wordpress.org/?v=1.5.2 Comment on Mikä ihmeen robots.txt ? by: Hakukoneoptimointia http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1596 Thu, 15 Mar 2007 12:40:39 +0000 http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1596 Juu, noin se toimii. Juu, noin se toimii.

]]> Comment on Mikä ihmeen robots.txt ? by: d http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1595 Wed, 14 Mar 2007 20:38:55 +0000 http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1595 Kiitoksia vinkeistä. Kysyn vielä: jos ihan simppelisti haluaa estää tietyn sivun indeksoitumisen, pitäisi se sitten varmaankin panna robots.txt tiedostoon kahdesti? Disallow: /index.php?id=1&id=2 Disallow: /?id=1&id=2 Sivustolle on mahdollista päätyä urlin kautta jossa index.php. Toisaalta serveripalvelu on sen verran alkeellinen ettei pääse ihan mitä tahansa muuttelemaan .htaccessiin. Kiitoksia vinkeistä.

Kysyn vielä: jos ihan simppelisti haluaa estää tietyn sivun indeksoitumisen, pitäisi se sitten varmaankin panna robots.txt tiedostoon kahdesti?

Disallow: /index.php?id=1&id=2
Disallow: /?id=1&id=2

Sivustolle on mahdollista päätyä urlin kautta jossa index.php. Toisaalta serveripalvelu on sen verran alkeellinen ettei pääse ihan mitä tahansa muuttelemaan .htaccessiin.

]]> Comment on Mikä ihmeen robots.txt ? by: Hakukoneoptimointia http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1594 Wed, 14 Mar 2007 19:18:59 +0000 http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1594 Kummankin kyllä pitäisi toimia. Tuo onkin hieman kinkkisempi homma. Oletan siis, että haluat robottien vierailevan vain /? -osoitteissa. Voisit kokeilla tätä: Disallow: /index.php? Allow: /? Tässä tapauksessa sivuston linkkien täytyy tosiaan osoittaa /?id=1&id=2 jne. Muuten robotti vain häipyy sivuilta jos linkit eivät ole kunnossa. Järkevämpää tosin olisi ohjata vaikka .htaccessilla kaikki käyttäjät automaattisesti /? -osoitteisiin index.php? -osoitteista. Lisää sivustosi tänne, niin saat hyvää detaljia hakurobottien liikkeistä sivuillasi ja siitä onnistuuko/estetäänkö indeksointi. Tuolta voit myös tarkastaa robots.txt:n toimivuuden: http://www.google.com/webmasters/ Kummankin kyllä pitäisi toimia.

Tuo onkin hieman kinkkisempi homma. Oletan siis, että haluat robottien vierailevan vain /? -osoitteissa.

Voisit kokeilla tätä:

Disallow: /index.php?
Allow: /?

Tässä tapauksessa sivuston linkkien täytyy tosiaan osoittaa /?id=1&id=2 jne. Muuten robotti vain häipyy sivuilta jos linkit eivät ole kunnossa. Järkevämpää tosin olisi ohjata vaikka .htaccessilla kaikki käyttäjät automaattisesti /? -osoitteisiin index.php? -osoitteista.

Lisää sivustosi tänne, niin saat hyvää detaljia hakurobottien liikkeistä sivuillasi ja siitä onnistuuko/estetäänkö indeksointi. Tuolta voit myös tarkastaa robots.txt:n toimivuuden:

http://www.google.com/webmasters/

]]> Comment on Mikä ihmeen robots.txt ? by: d http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1593 Wed, 14 Mar 2007 18:44:05 +0000 http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1593 Onko tällä erolla merkitystä? Netin eri tutorialeissa on molemmanlaisia esimerkkejä. Disallow: /sivu.html Disallow: sivu.html Jompikumpi oikein tai väärin? Entäpä kuinka blokataan index.php?id1&id=2, kun linkkeihin ei ole määritetty sivua index.php (eli käytännössä vierailija voi olla sivulla domain.com/index.php?id1&id=2 tai domain.com/?id1&id=2)? Onko tällä erolla merkitystä? Netin eri tutorialeissa on molemmanlaisia esimerkkejä.

Disallow: /sivu.html
Disallow: sivu.html

Jompikumpi oikein tai väärin?

Entäpä kuinka blokataan index.php?id1&id=2, kun linkkeihin ei ole määritetty sivua index.php (eli käytännössä vierailija voi olla sivulla domain.com/index.php?id1&id=2 tai domain.com/?id1&id=2)?

]]> Comment on Mikä ihmeen robots.txt ? by: Hakukoneoptimointia http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1585 Sun, 11 Mar 2007 17:06:01 +0000 http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1585 Juu Juu

]]> Comment on Mikä ihmeen robots.txt ? by: Kode http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1584 Sun, 11 Mar 2007 14:39:00 +0000 http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1584 Blokataanko alikansion alikonsio näin Disallow: /alikansio1/alikansio2/ Eli alikansio1 indeksoidaan ja alikansio2 blokataan tällä tavalla? Blokataanko alikansion alikonsio näin

Disallow: /alikansio1/alikansio2/

Eli alikansio1 indeksoidaan ja alikansio2 blokataan tällä tavalla?

]]> Comment on Mikä ihmeen robots.txt ? by: Hakukoneoptimointia http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1578 Fri, 09 Mar 2007 07:45:46 +0000 http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1578 Disallow: index.php?action=profile&id=* Tuo ei tosin ole standardin mukainen, mutta muistaakseni ainakin Yahoo ja Google tukevat "wildcard" -merkkiä. Disallow: index.php?action=profile&id=*

Tuo ei tosin ole standardin mukainen, mutta muistaakseni ainakin Yahoo ja Google tukevat “wildcard” -merkkiä.

]]> Comment on Mikä ihmeen robots.txt ? by: Ã…oke http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1570 Tue, 06 Mar 2007 08:56:54 +0000 http://www.hakukoneoptimointia.com/hakukoneoptimointi/mika-ihmeen-robotstxt.html#comment-1570 Miten blokataan tälläinen domain.com/index.php?action=profile&id=32 jossa id on vaihtuva ja niitä on kymmeniä? Miten blokataan tälläinen domain.com/index.php?action=profile&id=32 jossa id on vaihtuva ja niitä on kymmeniä?

]]>