IA | Transparencia

AI2 lanza Dolma, conjunto de datos gratuito para fomentar transparencia en la investigación de IA

Miles de autores firman una carta instando a los creadores de IA a dejar de robar libros

La importancia de la transparencia en los conjuntos de datos de IA

Los modelos de lenguaje como GPT-4 y Claude son poderosos y útiles, pero los datos en los que se entrenan son un secreto muy bien guardado. El Instituto Allen de Inteligencia Artificial (AI2) tiene como objetivo revertir esta tendencia con un nuevo y enorme conjunto de datos de texto que es gratuito y está abierto a la inspección.

Dolma, como se llama el conjunto de datos, está destinado a ser la base del modelo de lenguaje abierto planificado por el grupo de investigación, conocido como OLMo (Dolma es la abreviatura de "Data to feed OLMo's Appetite"). Según los investigadores de AI2, si el modelo está destinado a ser utilizado y modificado de forma gratuita por la comunidad de investigación de IA, también debería serlo el conjunto de datos que utilizan para crearlo.

El problema de la opacidad en los conjuntos de datos de IA

Aunque empresas como OpenAI y Meta publican algunas de las estadísticas vitales de los conjuntos de datos que utilizan para construir sus modelos de lenguaje, mucha de esa información se trata como propiedad exclusiva. Aparte de las consecuencias conocidas de desalentar el escrutinio y la mejora a gran escala, se especula que este enfoque cerrado se debe a que los datos no se obtuvieron de manera ética o legal: por ejemplo, que se incluyeron copias pirateadas de libros de muchos autores.

La iniciativa de AI2 para fomentar la transparencia

AI2 está desarrollando Dolma como una alternativa a esta opacidad. En un gráfico creado por AI2, se puede observar que los modelos más grandes y recientes solo proporcionan parte de la información que un investigador probablemente querría conocer sobre un conjunto de datos determinado. ¿Qué información se eliminó y por qué? ¿Qué se consideró texto de alta o baja calidad? ¿Se eliminaron adecuadamente los detalles personales?

AI2 y su modelo de lenguaje optimizado para la ciencia

Dolma de AI2 no es el primer intento de crear un conjunto de datos abierto, pero es el más grande hasta ahora (3 mil millones de tokens, una medida nativa de IA para el volumen de contenido) y, según afirman, el más sencillo en términos de uso y permisos. Utiliza la "Licencia ImpACT para artefactos de riesgo medio", de la cual se pueden ver los detalles aquí. Básicamente, requiere que los usuarios potenciales de Dolma:

  • Proporcionen información de contacto y casos de uso previstos.
  • Revelen cualquier creación derivada de Dolma.
  • Distribuyan esas creaciones derivadas bajo la misma licencia.
  • Se comprometan a no aplicar Dolma a áreas prohibidas, como la vigilancia o la desinformación.

Para aquellos que se preocupan de que, a pesar de los mejores esfuerzos de AI2, algunos de sus datos personales hayan llegado a la base de datos, hay un formulario de solicitud de eliminación disponible aquí. Es para casos específicos, no solo una solicitud general de "no me uses".

Acceso a Dolma y su importancia para la comunidad de investigación de IA

Si todo esto te parece bien, el acceso a Dolma está disponible a través de Hugging Face. AI2 espera que este enfoque abierto y transparente fomente la colaboración y el avance en el campo de la IA, alentando a otros a seguir su ejemplo y a proporcionar conjuntos de datos abiertos y accesibles para la comunidad de investigación.


Crear Canciones Personalizadas
Publicidad


Otras noticias • IA

Inteligencia artificial

YouTube Shorts integra IA para revolucionar la creación de contenido

YouTube Shorts, con 200 mil millones de visualizaciones diarias, integra inteligencia artificial para permitir a los creadores usar su imagen y voz. Esto plantea retos...

Auriculares inteligentes

OpenAI lanza auriculares "Sweet Pea" con inteligencia artificial integrada

OpenAI se prepara para lanzar su primer dispositivo, unos auriculares inalámbricos llamados "Sweet Pea". Con un procesador de 2 nanómetros, busca integrar inteligencia artificial localmente....

Innovación digital

Adobe Acrobat revoluciona productividad con nuevas herramientas de IA

Adobe ha integrado herramientas de IA en Acrobat, facilitando la creación de presentaciones, resúmenes en formato de podcast y edición mediante comandos de texto. Estas...

Energía sostenible

Energía geotérmica en EE. UU. podría superar 60 gigavatios

La energía geotérmica, subestimada hasta ahora, tiene un gran potencial en EE. UU., con estimaciones que podrían superar los 60 gigavatios para 2050. La startup...

Gasto creciente

Gasto en apps móviles supera a juegos gracias a IA generativa

En 2025, el gasto en aplicaciones móviles no relacionadas con juegos superó al de juegos, alcanzando 85 mil millones de dólares. Este crecimiento se debe...

Exportación tecnológica

EE. UU. permite exportación de chips a China, surgen preocupaciones

La reciente decisión de EE. UU. de permitir la exportación de chips de Nvidia y AMD a China ha generado preocupaciones sobre la seguridad nacional...

Crecimiento tecnológico

Startups indias impulsan el auge de la inteligencia artificial de voz

El crecimiento de la inteligencia artificial de voz en India está impulsado por startups como Bolna, que han superado desafíos de monetización y atraído inversiones...

IA espacial

Musk relanza Dojo3 para innovar en IA espacial

Elon Musk ha reactivado el proyecto Dojo3, centrado en la computación de IA espacial, tras desmantelar su anterior superordenador. Este enfoque audaz busca establecer centros...