Hoy vamos a utilizar una herramienta que nos permite generar un archivo llamado robots.txt que deberás subir por ftp en el directorio raiz de tu servidor para que cuando los robots de google ingresen, sepan que contenido tomar, y que NO.
Para ello, deberás entrar en el link que expongo a continuación, y hacer un listado de los directorios que NO queres que Google indexe. De ésta manera, todo lo restante, será exclusivamente lo que le ofrezcas al buscador para que tome tu contenido.
http://www.seochat.com/seo-tools/robots-generator/
Por ejemplo, en dattatec creamos un robots.txt que impide la visita de google a formularios y etc, para que no indexe contenido irrelevante, sino toda la información que un usuario pueda llegar a requerir.
Ariel Blanco
Dattatec .com





antes que nada … un gracias por toda esta info que como en mi caso soy autodidacta full y este año me largue a dar servicio como diseñador de paginas webs con bastante buen resultado y teniendo a dattatec como proveedor de host …mas que contento…si pinta algun problema me lo solucionan en el mismo dia (excelente) y respecto de la info que pones en este blog la verdad es 100% aprovechable.
desde ya muchisimas gracias por este aporte – me gustaria saber ya que no utilizo las redes sociales para nada … si me aportarian algo realmente…y donde puedo conseguir aprender sobre este tema en caso de tener alguna utilidad real…
blanco te banco a muerte, (el mago) pagerankeando