El botón de Google+ y los robots
Interesante (y corto) artículo sobre como interactúan los robots de Google con el botón de Google+ que se inserta en un sitio web.
Para resumirlo y ponerlo en español, alguien pregunta que pasa con el crawler si hay una regla que le impide al robot acceder a la página, como por ejemplo, con el robots.txt. La respuesta es simple como la pregunta:
El botón +1 interactúa con el robots.txt y otras directrices de una manera interesante. Como el botón +1 sólo se puede implementar en páginas públicas, Google puede visitar dicha página cuando se hace click en el botón +1 para verificar que efectivamente es pública. Este chequeo ignora las directivas que existan en el robots.txt u en otras partes. Sin embargo esto no impacta en el comportamiento de los robots/crawlers que se utilizan para indexar los contenidos o en su comportamiento con el robots.txt.
Deja una respuesta