Siguiendo el hilo de mi anterior entrada en esta bitácora, y en vista de que estoy sufriéndolo en mis propias carnes, como suele decirse, y puede leerse aquí, sigo empeñado en ahorrar en lo posible el ancho de banda que consume una determinada bitácora gestionada con Gesbit. Y hoy toca hablar del nuevo archivo que se incorpora a la distribución de Gesbit: "robots.txt", y que persigue este mismo objetivo, precisamente.
El archivo "robots.txt" cumple al menos dos funciones interesantes. La primera, que, existiendo, se ahorrará que Gesbit tenga que mostrar la correspondiente página de "error 404", derivada de su no existencia. Es decir, que al existir el archivo "robot.txt" se ahorran los recursos de la página de "error 404" que ha de preparar Gesbit, y que, incluirá estilos, JavaScript, etc. En cierto modo inútilmente, porque, quien "ve" esa página es un "robot", en este caso.
En segundo lugar, el archivo "robots.txt" se ha ganado la entrada en Gesbit porque, existiendo, puede ser utilizado por los correspondientes "robots" (buscadores, más que nada) y atenerse a las "reglas" que se declaran en dicho archivo. Concretamente, el archivo "robots.txt" de Gesbit indica que no se indexen determinados directorios y archivos, puesto que no tienen que ver con el contenido de una bitácora en concreto.
User-agent: * Crawl-delay: 5 Disallow: /gb-admin/ Disallow: /gb-extend/ Disallow: /gb-auxiliar/ Disallow: /gb-init.php Disallow: /gb-conf.php
Arriba los 141 bytes del "robots.txt" de Gesbit
Esas son las razones de incluir un archivo "robots.txt" en Gesbit y creo que ha de venir bien. Si quieres averiguar más sobre este tipo de archivos, puedes visitar el sitio web RobotTxt.org. Para terminar, decir que otro de los archivos que me "preocupan" es el "famoso" "favicon.ico", que, algunos navegadores, por ejemplo, buscan en el directorio raíz de un sitio determinado, y, si no lo encuentran... pasa lo que con el "robot.txt" susomentado.
Pero, en este caso, el asunto no es tan sencillo como situar un "favicon.ico" en el directorio raíz de Gesbit, puesto que, el W3C recomienda no utilizar esta técnica, sino indicar dónde se ha de encontrar dicho "favicon.ico" en el HTML de una determinada página, es decir, mediante un "meta enlace" en la cabeceradel documento HTML correspondiente. Aquí, por tanto, entrarían en juego los temas de Gesbit, aunque ignoro si aún así ciertos "clientes" insistirían en buscar el "favicon.ico" en el directorio raíz.
Para los accesos directos mediante el teclado en el panel de administración de Gesbit, venía usándose con éxito la
Efectivamente, ya es posible descargar la primera versión del