Barrapunto

El estándar dice que las peticiones a través de GET deben ser seguras y repetibles sin producir efectos adicionales (idempotentes)

Sin contar con que las páginas de administración, como los paneles de control de los CMS, en mi opinión, no deberían estar enlazadas desde el sitio principal (ni desde ningún otro) y que el robots.txt debería indicar los sitios que están vetados a los robots usando Disallow:

Pero es que no se trata de un robot de Google, sino de un programa que tiene instalado el usuario en su ordenador, y por tanto, si éste está visualizando una página, el programa seguirá los enlaces. Total, que las zonas protegidas por contraseña o por robots.txt no están a salvo de esto.