Estamos emocionados de anunciar que BuiltWith ahora rastrea sitios web que han implementado llms.txt - un nuevo estándar que permite a los dueños de sitios declarar cómo desean que su contenido sea utilizado por IA y LLMs. Al igual que robots.txt pero para grandes modelos de lenguaje, llms.txt otorga a los sitios web más control sobre cómo se accede y utiliza sus datos. Ahora puedes explorar una lista descargable completa de dominios que han añadido este archivo a sus directorios raíz. 📥
Ya sea que seas un investigador de IA, defensor de la ética de datos, o simplemente curioso acerca de las tendencias de adopción en el espacio de LLM, este nuevo conjunto de datos es una mina de oro. 🧠💡 Descubre qué sitios importantes establecen límites para la IA y observa qué tan rápido este protocolo está ganando tracción en la web. ¡Dirígete a BuiltWith, busca "llms.txt" uso, o descarga la lista directamente para explorar! 🔍🌐





