Avisos
Vaciar todo

Ha desaparecido el archivo robots.txt  

 
Aitor
 Aitor
Usuario eminente

Hola.

 Cuando he ido a meter los sitemaps de mi página en Google Search Console me pome que no se ha podido obtener. 

Cuando busco la razón me pone lo siguiente: 

Error general de HTTP
1
 
No se ha podido acceder a tu sitemap. Asegúrate de que tu sitemap se encuentre en la dirección especificada y de que Google no tenga bloqueado el acceso. Consulta nuestroCentro de Ayudapara obtener más información sobre la depuración de problemas.
 
Y hay algunos post que tampoco me deja indexar porque me dice que no encuentra el archivo robots.txt 
 
Error: No se puede obtener el archivo Robots.txt
 
He creado un ticket y me han contestado que consulte en el foro ya que puede ser cosa del Yoast Seo.
 
En herramientas de Yoast Seo en la opción Editor de archivos aparece lo siguiente:
 
User-agent: *
Disallow: /wp-content/uploads/wpo/wpo-plugins-tables-list.json

# START YOAST BLOCK
# ---------------------------
User-agent: *
Disallow:

Sitemap: https://www.donostiasecreta.com/sitemap_index.xml
# ---------------------------
# END YOAST BLOCK

 
No sé si me podríais echar un cable. Muchísimas gracias.

Screenshot 20250126 205821 Chrome
Screenshot 20250126 205919 Chrome
Screenshot 20250126 205914 Chrome
Screenshot 20250126 205709 Chrome
Screenshot 20250126 210103 Chrome

 

Contenido solo visible a usuarios registrados

Citar
Respondido : 26/01/2025 8:02 pm
Pepe
 Pepe
Soporte CMS Webempresa Admin

Hola Aitor.

Lo primero editar el archivo robots.txt y lo modificas por el que tienes al final de esta entrada del blog que mucho mas completo que el que tienes:

-> Crear y optimizar Robots.txt en WordPress – La Mejor Guía

Del código tienes que cambiar la última línea del sitemap por la URL de tu sitemap.

 

Luego veo que tienes validado el dominio con un archivo txt pero el nombre no está bien googleaa6f46438dbc4650 (4).html sobra el (4) este número se añade cuando se descarga el archivo varias veces. El nombre del archivo tiene que ser googleaa6f46438dbc4650.html 

 

Revisa si se soluciona y nos comentas.

 

Un saludo

ResponderCitar
Respondido : 27/01/2025 9:33 am

optimiza-automaticamente-todas-las-imagenes-de-tu-wordpress

Aitor
 Aitor
Usuario eminente
Hola gracias por la respuesta.
Screenshot 20250127 204055 Chrome
Screenshot 20250127 204030 Chrome
 
He leído la guía y he actualizado en
Yoast Seo el apartado de robots.txt con los
sitemaps y le he dado a guardar cambios a robots.txt
Luego voy a Google Search Console a probar pero
me sigue dando error.

No se si me estoy saltando algún paso. La verdad que
se me está haciendo muy complicado entender este
tema aunque esté leyendo la guía que me habéis mandado.
ResponderCitar
Respondido : 27/01/2025 7:50 pm
Karen Rios
 Karen Rios
Soporte CMS Webempresa Moderator

Hola Aitor, 

En este caso que cambio realizaste?, veo que aún tienes el archivo robots.txt con las opciones por defecto

image

Puedes editar tu archivo robots.txt y añadir el código que indican en el punto Cómo optimizar el Robots al máximo

Ten en cuenta que de este código es importante añadas la URL correcta de tu sitemap → Contenido solo visible a usuarios registrados

image

Guardas los cambios y compruebas, por ahora ya el archivo robots.txt está creado

PD: Ten en cuenta que lo mejor para hacer estos cambios es hacerlo desde tu ordenador, de esta forma puedes verificar se esta pegando el codigo de forma correcta. 

Un Saludo

ResponderCitar
Respondido : 27/01/2025 8:13 pm

Cursos Gratuitos WordPress

Aitor
 Aitor
Usuario eminente

Hola gracias

Voy a darle una vuelta y empezar a leer de cero este tema de los robots.txt porque cada vez me estoy liando más y creo que estoy atascado.

 

Gracias por vuestros esfuerzos.

ResponderCitar
Respondido : 27/01/2025 8:26 pm
Karen Rios
 Karen Rios
Soporte CMS Webempresa Moderator

Hola Aitor, 

De acuerdo, puedes revisarlo y verifica como va todo.

No dudes en escribirnos si tienes cualquier otra consulta. 

Un Saludo

ResponderCitar
Respondido : 27/01/2025 8:37 pm

Aitor
 Aitor
Usuario eminente

Buenas.

 ¿Después de crear el archivo robots.txt en Yoast Seo hay que subirlo obligatoriamente a Google search console o lo encuentra automáticamente?

Porque creo que ya lo he solucionado, ya que las páginas que habían desaparecido han vuelto a aparecer en los resultados de Google.

Además he comprobado si el robots.txt es correcto en una página y no me ha dado ningún error.

 

Muchas gracias a tod@s.

 

Screenshot 20250128 203050 Chrome
Screenshot 20250128 203022 Chrome
ResponderCitar
Respondido : 28/01/2025 7:31 pm
Karen Rios
 Karen Rios
Soporte CMS Webempresa Moderator

Hola Aitor, 

Por defecto, los motores de búsqueda comenzarán a rastrear tu sitio web siguiendo las directrices de tu archivo robots.txt- Si los URL ya se muestran, espera unos días más y asegúrate todas las URL ya estén indexadas nuevamente. 

Ten en cuenta que esto puede demorar unos días o semanas mientras los motores de búsqueda rastrean nuevamente tu sitio web. 

Un Saludo 

ResponderCitar
Respondido : 28/01/2025 8:02 pm

Gestor de Contraseñas - VPN Conexión Segura - Gestor 2FA (Segundo Factor de Autenticación