Robots.txt
El archivo robots.txt permite a los webmasters influir en la indexación de sus proyectos. Para gestionar el rastreo de las webs por parte de los robots de los buscadores, este anida en la raíz del dominio, se suma a otras herramientas como las etiquetas meta de HTML, las redirecciones o el canonical tag. Ahora bien, ¿cómo puede hacerse esto? En este tutorial detallamos las funciones de un…