Autor Tema: Joomla - ¿Para que sirve el archivo robots.txt?  (Leído 4131 veces)

Manuel Sierra

  • Principiante
  • **
  • Mensajes: 72
    • Ver Perfil
Joomla - ¿Para que sirve el archivo robots.txt?
« en: 01 de Marzo 2012, 08:36 »
Hola Amigos:

Quisiera saber para que sirve el archivo robots.txt de la instalación de joomla, ya que he sentido que debe ser importante, pero no se muy bien para que lo utiliza y como.

Un saludo y gracias.

kansadostoy

  • Sin experiencia
  • *
  • Mensajes: 26
    • Ver Perfil
Re:Joomla - ¿Para que sirve el archivo robots.txt?
« Respuesta #1 en: 02 de Marzo 2012, 09:09 »
Hola:

Primeramente bienvenido Manuel, he visto que eres un nuevo usuario del foro. Y segundo quisiera explicarte un poco la utilidad del fichero robots.txt.

Este fichero es importante para las indexaciones por parte de los buscadores ya que básicamente restringe el acceso que tienen los robots de cada buscador a determinadas carpetas de nuestra web.

Un ejemplo de fichero sería el siguiente:

*****************************************************
User-agent: Googlebot*
 Disallow: /administrator/
 Disallow: /cache/
 Disallow: /components/
 Disallow: /editor/
 Disallow: /includes/
 Disallow: /language/
 Disallow: /mambots/
 Disallow: /media/
 Disallow: /modules/
 Disallow: /templates/
 Disallow: /installation/



 User-agent: Scooter
 Disallow: /administrator/
 Disallow: /cache/
 Disallow: /components/
 Disallow: /editor/
 Disallow: /includes/
 Disallow: /language/
 Disallow: /mambots/
 Disallow: /media/
 Disallow: /modules/
 Disallow: /templates/
 Disallow: /installation/

 User-agent: *
 Disallow : /

**********************************************************

Como puedes ver es una lista de User-agent para cada buscador y donde se permite o no la indexación a determinada carpeta. Así para el primero que es uno de los robots de google no permite por ejemplo la indexación a la carpeta administrator entre otros.

Para el resto esta el último User-agent:* esto no permite que otros robots que no sean los indicados indexen páginas de la web joomla, ya que tiene la opción Disallow: /

Espero te sirva un poco para entender el funcionamiento.

 

Sobre la educación, sólo puedo decir que es el tema más importante en el que nosotros, como pueblo, debemos involucrarnos.

Abraham Lincoln (1808-1865) Presidente estadounidense.

aprenderaprogramar.com: Desde 2006 comprometidos con la didáctica y divulgación de la programación

Preguntas y respuestas

¿Cómo establecer o cambiar la imagen asociada (avatar) de usuario?
  1. Inicia sesión con tu nombre de usuario y contraseña.
  2. Pulsa en perfil --> perfil del foro
  3. Elige la imagen personalizada que quieras usar. Puedes escogerla de una galería de imágenes o subirla desde tu ordenador.
  4. En la parte final de la página pulsa el botón "cambiar perfil".