Hola estuve mirando la web de robots.txt pero no logre aclarar laduda que tengo que esta yo tengo puesto en el robots.txt esto Disallow: /images pero necesito que una carpeta que se encuentra dentro de images que seria images/stories/pdf quede excluida de esa norma ya que tengo pdf que necesito que indexe google dentro de esa carpeta pero no logro entender como hacerlo mediante la informacion de la página ya citada.
Un saludo
Hola grobadicto,
lo que yo haría es eliminar la línea del robots que indicas:
Disallow: /images
Elimina la línea ya que de esta forma Google indexará tus imágenes que pueden atraer un tráfico extra desde Google Images.
La única razón por la que dejaría la línea es que tuvieras problemas con el ancho de banda disponible en tu web..
La recomendación de los SEO es que se quite esta línea.
Saludos!!
A vale muchas gracias por el consejo.Edito para preguntar otra cosa que acabo de ver mirando el jcrawler que es el que utilizo para realizar los sitemaps que en los Forbidden file types estan puestos los archivos de tipo .jpg, .jpeg, .gif, .png,¿debería también quitarlos de ahí e incluírlos en el sitemaps?
Es que en esto del Seo estoy aún un poquillo verde pero con lo que me gustan a mi estos temas y además que aprendo rápido no tardaré mucho en mejorar ese aspecto.
Un saludo
Hola grobadicto
No hay problema si los pones, pero asegúrate de que tengan un nombre relevante con lo que presentas.
Saludos.
A vale ok lo del nombre relevante y descripción ya lo he venido haciendo desde que comence las páginas web así que por eso no hay problema,muchas gracias.
Un saludo