ROBOTS

Los robots se encargan de rastrear el contenido de nuestro sitio web. El que usa Google se llama googlebot, y además de examinar el contenido de las páginas examina los PDFs, DOC… Googlebot pasa por cada página cada cierto tiempo, dependiendo del PageRank de la página, y recorre todas las palabras y enlaces que encuentra, menos aquellas partes para las que le hayamos indicado que no queremos que las tenga en cuenta.

Indicamos las zonas en las que no queremos que entre googlebot (ni ningún robot de cualquier otro buscador) mediante el fichero robots.txt. La forma más sencilla de crear este fichero es con la herramienta Generate robots.txt de Google Webmaster Tools. Lo que hay que hacer es indicar la página o directorio en la que queremos aplicar determinada acción para uno o más robots de búsqueda, descargar el archivo txt y subirlo a la raíz de nuestro sitio, y a esperar a que google pase.

¿Por qué este blog y de que va?

Este es un blog que voy a dedicar al posicionamiento en motores de búsqueda para la web. No tengo ni idea de este tema y hace poco he empezado a intentar aprender todo lo que hay que hacer para que una página web aparezca en los primeros resultados de una búsqueda en Internet. Está claro que no voy a contar nada nuevo. Voy a usarlo para aprender, no para enseñar. Este blog van a ser mis “apuntes de clase”, aquí voy a recopilar lo que vaya aprendiendo en manuales, en la web, de amigos… y del que quiera decirt lo que sea.