Buenos días
tengo un problema con el robots.txt de mi web, ya que cuando lo pongo en el buscador me da un error 404 y no se que estoy haciendo mal ya que es el mismo que otras webs que tengo que no me dan error.
A ver si me podéis ayudar, el contenido es el siguiente:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-
Sitemap: http://skodasantcugat.com/sitemap_index.xml
Allow: /feed/$
Disallow: /feed
Disallow: /comments/feed
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
#el sitemap
Sitemap: http://skodasantcugat.com/sitemap_index.xml
Un saludo
Jordi
URL del sitio: Contenido solo visible a usuarios registrados
Hola,
Entiendo que te refieres a que no se está cargando la página Contenido solo visible a usuarios registrados
De ser así, verifica que realmente tienes el archivo robots.txt en la raíz de esa página web y que el nombre del archivo es correcto. Si la web se carga desde un directorio asegúrate de que el archivo está en el directorio correcto.
Comprueba además que el archivo tiene permisos 644. Esto lo puedes ver desde el administrador de archivo de CPanel.
Perdona Pablo,
No se si me he explicado, es que pongo la url y me da error 404,
Haz la prueba si quires:
http://skodasantcugat.com/robots.txt
SAludos
Jordi
Hola,
Sí te había entendido, es justo el enlace que te había pegado en mi respuesta.. Como te decía, tienes que verificar que el archivo tenga el nombre correcto (por ejemplo, que no se llame robot.txt), que esté situado en la raíz de tu sitio web y que tenga los permisos correctos (644).
Si todo está bien envíanos una captura de archivos del administrador de archivos de CPanel donde podamos ver el archivo robots.txt.
Pablo,
Yo el contenido lo he hecho a través del panel de control>ajustes>lectura. No he colgado ningún archivo en la raiz.
SAludos
Jordi
Hola,
En tal caso verifica desde el administrador de archivos de CPanel si tienes ese archivo robots.txt en la raíz de tu sitio web. De no ser así puedes crear uno en tu equipo con el código que quieras y subirlo a la raíz del sitio con el propio administrador de archivos.
hola Pablo,
Yo no veo el archivo .txt en la raiz
Me puedes indicar como hacerlo?
Saludos
Jordi
Hola Jordi
Prueba usando un plugin que te genera el robots.txt con configuraciones por defecto
Revisa : https://wordpress.org/plugins/wp-robots-txt/
Saludos.
Hola John,
Ya lo tenía instalado.
Saludos
Jordi
Solucionado,
Muchas gracias
SAludos
Jordi