Acabo de subir el sitemap
En Webmasters tools me sale el siguiente aviso:
¿El archivo robots.txt está bloqueando páginas importantes?
cuando voy a ver que página es, resulta que es la home
¿que tengo que hacer?
URL del sitio: Contenido solo visible a usuarios registrados
Por visto faltaba incluir el sitemap en el robots.txt
He creado el siguiente archivo robots.txt:
User-agent: *
Disallow: /wp-admin/
Disallow: /administrator/
Disallow: /cgi-bin/
Disallow: /frasex.com/
Disallow: /wp-content/themes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/banners/
Disallow: /wp-content/cache/
Disallow: /wp-includes/
Sitemap: http://gaixto.com/sitemap_index.xml
¿es correcto?
¿sobra alguna carpeta?
¿falta alguna carpeta?
Hola Jose Ignacio,
Dentro de nuestros servicios no se incluye el de posicionamiento, seo, o marketing online, por lo que la información que podemos darle es de carácter orientativo.
El archivo robots.txt es correcto ya que de esta forma no se rastreará las URLs dedicadas a la parte de la Administración Wordpress ( aunque no veo la necesidad de deshabilitar frasex.com )
Revisa:
https://www.webempresa.com/blog/item/1217-configurar-seo-en-wordpress-9-parte.html
Saludos