User-agent: * # se aplica a todos los robots Disallow: # permite el indexado de todas las páginas