Archivo Robots.txt para Joomla

El archivo robots.txt es un pequeño fichero de texto situado en la carpeta raíz de su sitio web Joomla. Este archivo contiene las instrucciones para que los buscadores como Google, Yahoo, Bing y otros sepan que pueden buscar y que no pueden. Los robots de estos buscadores que analizan la información y los contenidos de tu web pueden sobrecargar el servidor analizando cosas innecesarias, como por ejemplo, partes de foros, comentarios, etc.. y es mejor cerrarles el paso.

Algunas personas suelen confundir el archivo robots.txt con el archivo .htaccess pero hay grandes diferencias entre ambos. El primero solamente le facilita las instrucciones a los motores de b?squeda y no tiene ninguna función de seguridad, pero si bastante valor en el posicionamiento SEO de la web. En cambio, el segundo archivo .htaccess se usa para configurar las opciones del servidor Apache, redirigir URLs y otras tareas relacionadas con el servidor donde est? alojada tu web.

EJEMPLO : Eliminar la exclusión de imágenes:

Por algún motivo que no entendemos, la configuración inicial de Joomla viene de tal manera que no permite que los robots de los buscadores indexen las imágenes de nuestra web. Esto es algo no deseable, ya que nos interesa que Google visite nuestras imágenes y las indexe en su lista de resultados.

Para cambiar esto, tiene que editar su archivo robots.txt y eliminar la línea de código:

Disallow: /images/

Eliminando esta línea , Google empezará a indexar las imágenes de su web.