Este vídeo explica qué son los robots Web y para qué sirven. A continuación explica qué tipos de robots hay y cómo se clasifican según su funcionalidad. Seguidamente, se explica cómo podemos los desarrolladores Web comunicarnos con los robots. Concretamente, se presenta el fichero robots.txt y su utilidad. Mostrando dos ejemplos del mismo. Por último se presenta la etiqueta META
39:44 · 2019