Problemas de indexación en Google  

Hola Luis, 

Puedes comentarnos algunas de estas URL que no logran indexarse? actualmente si realizo una búsqueda de tu sitio web en Google vemos que están indexadas esta

Sin embargo, vemos que las etiquetas que tienes añadidas como menú principal muestran un No Index

Esto sucede porque posiblemente tienes configurado en la etiqueta, no se indexe, esto puedes verificarlo editando la etiqueta y verificando en el apartado avanzado de Yoast SEO

Debes configurar esto en Si y guardar los cambios.

Ten en cuenta que tienes que revisar la configuración general de Yoast SEO y decidir que vas a indexar, usualmente las etiquetas están configuradas como no, en este caso, ya que las utilizas debes ir a Yoast SEO → Ajustes → Etiquetas y cambiar esto para que se indexen 

Debes realizar primero este ajuste y luego editar las etiquetas actuales y cambiar los ajuste a sí, una vez realizado prueba enviar nuevamente tu sitemap y revisa si con esto se muestra el contenido que necesitas. 

Ten en cuenta que el cambio no es inmediato y puede demorar días o algunas semanas hasta que comiencen a mostrarse en los resultados de búsqueda. 

Verifícalo y nos comentas como va todo

Un Saludo 

Hola Karen, gracias por revisarlo.

Efectivamente hemos desactivado la indexación de algunas etiquetas, ahora te explico por qué.

La página que no se indexa, por poner un ejemplo, es esta, y como verás las etiuetas están correctamente: https://arabesqe.com/categoria-producto/cristales-para-maillots/

Respecto a las etiquetas que comentas, lo hemos hecho porque en Search Console estamos viendo, por un lado, que la indexación ha caído en picado en los últimos 2 meses:

Y por otro lado, vemos que Google lleva casi un mes sin rastrear páginas del sitio, y las que ha rastreado incluyen muchos parámetros y no son útiles, pero aun así tampoco las indexa:

Hola Luis,

Perdona, pero no comprendemos del todo, indicas que has hecho ese ajuste por que has visto que ha bajado la indexación, esto es normal, si tus páginas tienen noindex son para que no se indexen, las que si tienen index son las que van a estar en Google, primero si quieres que tus paginas esten debes quitarles el noindex.

Luego, cuando ya tengas las páginas con index puedes enviar de nuevo tu sitemap para que Google tome este nuevo sitemap en consideración en lugar de hacer un rastreo con el bot. Tu URL del sitemap es esta:

https://arabesqe.com/sitemap_index.xml

Este es generado por el propio plugin de yoast.

Un saludo 🖐️ 

Hola Argenis,

Como decía, eso está puesto solo en algunas páginas, no en todas.

Por eso no entiendo que las páginas que tienen index, follow no se estén indexando, como esta: https://arabesqe.com/categoria-producto/cristales-para-maillots/

Si analizas la página debería ser indexable, pero Google solo indexa la home del sitio, ninguna otra página más se está indexando, aunque tengan index,follow.

Hola Luis,

Que te indica la herramienta de inspección de URL sobre esa que nos compartes?

esto lo tienes en el search console, verifica la URL y nos compartes una captura del resultado.

Un saludo 🖐️ 

Gracias Argenis por tu interés en ayudarme.

Esto es lo que sale al inspeccionar esa url, ya he solicitado la indexación en varias ocasiones, pero nada:

Y por si me lo preguntas, estos son los sitemaps enviados a Google:

Muchas gracias por tu tiempo.

Un saludo,
Luis.

Hola Luis, 

En esta última URL que enviaste no veo que está marcada como no index, en teoría Google debe poder indexarla. Vamos a verificar lo siguiente, prueba optimizar tu archivo robots.txt con las opciones que se indican en el siguiente artículo que tenemos disponible → https://www.webempresa.com/blog/robots-txt-en-wordpress-que-problema-tienes-googlebot.html

Justo el punto que indica → Cómo optimizar el Robots al máximo, prueba realizar esto y envía nuevamente la indexación de tu sitemap

Un Saludo 

Hola de nuevo,

Hemos realizado los cambios en el robots.txt tal y como se indica en la guía que tan amablemente me has indicado. También actualizamos los sitemaps en Search Console.

Ahora ha aparecido esto:

La URL https://arabesqe.com/producto/cristales-cosidos-cosmic/ en principio funciona bien, no entiendo qué problema encuentra el rastreador de Google.

Por otro lado, el rastreador de Screaming Frog recibe errores 503 del servidor en páginas que deberían poder rastrearse, ya que tenemos desactivado en el alojamiento el bloqueo a rastreadores:

¿Alguna idea de qué puede estar pasando?

Hola Luis.

Veo que sigues con el mismo robots.txt:

Tienes que sustituirlo por el que tienes al final de esta entrada:

-> Crear y optimizar Robots.txt en WordPress – La Mejor Guía

Solo tienes que modificar la última línea del sitemap por la URL de tu sitemap.

Las URL que tienes de los filtro no se indexan, es normal que no se indexen ya que pertenece a los filtros de WooCommerce y no tiene sentido indexarlos, incluso esta bloqueado en el archivo robots.txt con estas líneas:

Disallow: /?filter_tamano-cristal=
Disallow: /?filter_color=

Sobre los errores de Screaming Frog solo tienes que probar la URL desde Google y ver si se puede indexar, los errores 503 El error es un código de estado HTTP que indica que el servidor no puede procesar la solicitud en ese momento y puede ser algo puntual por alguna sobrecarga pero eso no quiere decir que no se indexe.

Un Saludo

@pepesoler no sé cómo pero estás viendo la versión antigua, yo lo veo así en https://arabesqe.com/robots.txt:

Respecto a los errores 503 no parecen algo puntuales, mas bien parece que el servidor esté rechazando el escaneo de ScreamingFrog por algún motivo, porque esos errores aparecen siempre que hacemos un escaneo, así que pienso que podría estar pasando lo mismo con los rastreadores de Google, porque no lo veo normal.

Hola Luis,

En tal caso de que sea lo que comentas ya tendrías que verlo por ticket, desde foro no tenemos acceso a validar información directa de bloqueos en tu hosting, pero ten en cuenta que si estuviese bloqueado Google como indicas a nivel de servidor lo estaría para todo el sitio, no para una página en concreto.

Ten en cuenta que algunas veces Google se tarda un tiempo en indexar las páginas a lo mejor si esperas unos dias luego de que tu sitemap este subido lo tomara de nuevo, vemos que el ultimo es del 29 de diciembre, viendo tu sitemap vemos que si está presente la categoría, pero no estamos seguros de que sea la misma versión de ese 29 de diciembre.

Un saludo 🖐️