Buenas,
Desde hace unos meses se me están desindexando URLs de mi web aleatoriamente. Cuando me doy cuenta de que la URL no está en Google miro en Search Console y veo que pone que está "Excluida". Si la envio a Google en un par de minutos vuelve al índice de Google, pero hasta que me doy cuenta puedo estar días perdiendo tráfico.
No tengo redirecciones hechas, y el Sitemap y Robots.txt parecen estar correctos.
¿Puede haber algún problema en el rastreo del bot de Google? ¿Hay forma de ver algún log para saber si algo está bloqueando a los bots?
Hola Sergio.
Te indica algo de por que se excluyen esas URL ?
.- Accede a la carpeta de la instalación y elimina el contenido que tienes dentro del archivo robots.txt
.- Copia el código que encontrarás en esta entrada del blog al archivo robots.txt, copia el código final " Cómo optimizar el Robots al máximo "
-> https://www.webempresa.com/blog/robots-txt-en-wordpress-que-problema-tienes-googlebot.html
Un saludo
Muchas gracias por la respuesta Pepe, en Search console no hay más información. Incluso en varias ocasiones la url desaparecia totalmente de la búsqueda de Google(comprobado con site:) y en Search console ponía que estaba indexada y sin ningún problema, era enviarla de nuevo y en unos minutos aparecer de nuevo.
Probaré a configurar el Robots.txt como comentas y lo observaré.
No creo que tarde en ver si se soluciona porque suele pasarme bastante a menudo, sobre todo en dos de las webs que tengo alojadas en Webempresa.
Hola
Ok, ya nos comentas como te fue con ese cambio y si tuvo algún efecto en las búsquedas.
Saludos.