El archivo robots.txt

El otro día en ¿Cómo crear un sitio web bajo WordPress con uno o varios alias de nombre de dominio?, os esbozábamos apenas unas cuantas líneas sobre el archivo robots.txt, y hoy queremos profundizar un poco más en este pequeño y, en apariencia, insignificante, pero importantísimo archivo. Pero empecemos por …

Sigue leyendo: El archivo robots.txt