Hola,
Estoy optimizando mi archivo robots.txt
Quisiera "disallow" artículos individuales, como Política de Privacidad, Política de Cookies y otros que no aportan valor de indexación relevante a la web.
¿Cuál es la sintaxis correcta para un artículo?
Disallow: /alias-de-articulo
o
Disallow: /alias-de-articulo/
Gracias de antemano,
Juan
PD.: Observo que en el robots.txt viene la entrada siguiente:
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html
que supuestamente debe llevar a un sitio donde checkear la sintaxis de los robots.txt.
Actualmente esa url redirige a https://www.simonwilkinson.net/, una página de arte.
URL del sitio: Contenido solo visible a usuarios registrados
Hola Juan,
La sintaxis debería ser:
Disallow: /alias-de-articulo.html
Te recomiendo revises este enlace:
https://docs.joomla.org/Robots.txt_file
Saludos
Hola Juan,
La sintaxis debería ser:
Disallow: /alias-de-articulo.html
Te recomiendo revises este enlace:
https://docs.joomla.org/Robots.txt_file
Saludos