Buenos días, Search Console de Google me infomra que tengo 14 páginas con problemas de indexación de ni sitio web: tgodata.com
Supongo que será por no tener instalada la carpeta robots.txt, la he creado mediante Yoast SEO y, por defecto, me pone el siguiente código en la carpeta ( se adjunta imagen al final)
De las 14 páginas, hay cuatro que son política de cookies y de privacidad.
El resto son páginas: Home, About, Contact y 7 entradas del blog (sobre la pagina del blog no dice nada...)
MI pregunta es, ¿como debo hacer para editar el robots.xtx para que puedan indexrse las páginas de contenido que me interesan
MUchas gracias
Jordi
Contenido solo visible a usuarios registrados
Hola Jordi,
El archivo robots.txt puedes editarlo desde las opciones de Yoast SEO → Herramientas → Editor de archivos
Verás tu archivo robots.txt que puedes editar y configurar como deseas
Sobre el archivo robots.txt puedes comprobar las siguientes recomendaciones, por ejemplo el punto que indica Cómo optimizar el Robots al máximo → https://www.webempresa.com/blog/robots-txt-en-wordpress-que-problema-tienes-googlebot.html
Verificalo y nos comentas como va todo
Un Saludo
Gracias Karen,
Disculpa pero no soy muy diestro con esto.
Siguiendo las instrucciones que me has enviado he aplicado:
Disallow:/cgi.bin/
Disallow:/wp-admin/
Disallow:/wp-content/plugins/
Allow:/wp-admin/admin-ajax.php
Mis dudas empiezan a partir de ahí:
¿Las páginas que me interesa que indexe Google, les debo aplicar Allow?
¿Las páginas que no quiero que indexe (cookies, privacidad, etc) tengo que aplicar tambien Disallow?
Muchas gracias
Jordi
Hola Jordi,
En este caso es correo el Allow permite que el contenido sea rastreable por el robot de Google mientras que el disallow es todo lo contario; de igual forma Yoas SEO te permite configurar que algunas páginas no se indexen esto puedes indicarlo dentro de la misma URL si tienes el plugin de Yoast SEO o mediante Search Console, puedes ver mas información sobre esto en la siguiente entrada que tenemos disponible → https://www.webempresa.com/blog/no-index-wordpress-que-significa-y-como-configurarlo.html
Un Saludo
Karen,
Por tu respuesta, creo que lo que te he enviado estaba mas o menos bien, o al menos eso entiendo.
En cualquier caso, Gracias
Hola Jordi,
De acuerdo, entiendo que has logrado verificar tu duda y todo está correcto.
Coméntanos si con esto podemos dar el tema como solucionado.
Un saludo 😊
Hola,
Bueno, pues de entrada, lo dejamos resuelto en manos de Google.
Muchas gracias