Robots en tienda on line  

Hola

La pregunta sería por que quieres ocultar el robots.txt?, es perfectamente válido que se muestre públicamente.
Actualmente veo varias urls que has colocado en tu robots.txt, tal vez ese es el motivo, pero no le veo mucho sentido a que tengas tantas urls en el robots.txt, por ejemplo he probado algunos y no existe el contendio, por ejemplo :
Contenido solo visible a usuarios registrados

Tal vez lo que quieras realizar sea una redirección, en este caso se debe usar el .htaccess en elugar del robots.txt, si esta url ya esta indexada desde google Search console puedes deshabilitarlo del indice, es decir hay varias formas de lidear con urls que no quieres indexar o que no existen.

Si aún quieres continuar con el tema de ocultar robots.txt puedes revisar :
http://websitefix.com/threads/hide-your-robots-txt-from-visitors-and-show-it-only-for-validated-robots.7256/

Saludos.

Hola

Es un tema de SEO y de errores de rastreo. Si tienes una url que da error 404 .... no aporta nada al SEO.

Saludos

Hola

Has evaluado redireccionar estas urls?, entiendo que estas urls han sido indexadas por lo que antes existian.

Saludos.

Hola Jhon

Esas urls ya no existen, daban error 404 en el rastreo, asi que las elimino. no es que existan y las redireccione, si no que no existen.

Si hay otra forma de hacerlo mejor ... oidos abiertos!!

Gracias

Hola

Usualmente se redirecciona al home de tu sitio, podrías evaluar hacer esto.

Saludos.

Hola

Pues, lo veo, me parece buena idea, asi no se pierde el enlace.

Gracias
Saludos