IA | Control

Amazon lanza "Guardrails for Amazon Bedrock" para controlar lenguaje AI

Amazon anuncia nuevas herramientas para controlar los modelos de lenguaje y evitar respuestas inapropiadas

En el evento AWS re:Invent que se está celebrando en Las Vegas, el CEO de Amazon Web Services (AWS), Adam Selipsky, ha anunciado una nueva herramienta llamada "Guardrails for Amazon Bedrock". Esta herramienta tiene como objetivo proporcionar un mayor control sobre los modelos de lenguaje utilizados en aplicaciones de inteligencia artificial, permitiendo a las empresas definir y limitar los tipos de lenguaje que un modelo puede utilizar.

En una publicación de blog, Amazon explica que con Guardrails for Amazon Bedrock, las empresas pueden implementar salvaguardias para ofrecer experiencias de usuario relevantes y seguras, alineadas con las políticas y principios de la compañía. Esta herramienta es especialmente útil para evitar respuestas inapropiadas o ofensivas que podrían dañar la reputación de una marca.

Controlando las respuestas de los modelos de lenguaje

La nueva herramienta de Amazon permite a las empresas definir temas que están fuera de los límites del modelo de lenguaje, de modo que no responda a preguntas irrelevantes. Por ejemplo, una empresa de servicios financieros puede evitar que el modelo de lenguaje proporcione consejos de inversión inapropiados que los clientes puedan tomar en serio. Además, es posible filtrar palabras y frases específicas para eliminar cualquier tipo de contenido ofensivo.

Amazon también ofrece la opción de filtrar datos de información personal identificable (PII, por sus siglas en inglés) para evitar que los modelos de lenguaje accedan a datos privados al proporcionar respuestas. Esto es especialmente importante en términos de privacidad y seguridad de los datos.

El desafío de desarrollar inteligencia artificial responsable

Según Ray Wang, fundador y analista principal de Constellation Research, esta herramienta puede ser fundamental para los desarrolladores que trabajan con modelos de lenguaje, ya que les ayuda a controlar las respuestas no deseadas. Wang destaca que uno de los mayores desafíos en la creación de inteligencia artificial responsable es garantizar la seguridad y facilidad de uso. La filtración de contenido y la protección de la información personal son dos de los principales desafíos a los que se enfrentan los desarrolladores. Además, destaca la importancia de la transparencia, explicabilidad y reversibilidad en el desarrollo de modelos de lenguaje.

Disponibilidad y próximos pasos

La función de guardrails anunciada por Amazon está actualmente en versión de prueba. Se espera que esté disponible para todos los clientes el próximo año. Esta herramienta representa un paso importante en el control de los modelos de lenguaje utilizados en aplicaciones de inteligencia artificial, permitiendo a las empresas garantizar respuestas relevantes y seguras para los usuarios, al tiempo que evitan cualquier tipo de contenido inapropiado u ofensivo.


Podcast El Desván de las Paradojas
Publicidad


Otras noticias • IA

Filtraciones preocupantes

Filtraciones en Anthropic generan alarma sobre seguridad en IA

Anthropic ha sufrido filtraciones de datos que han expuesto su código fuente, generando preocupaciones sobre la seguridad en la inteligencia artificial. Estos incidentes resaltan la...

Actualización colaborativa

Salesforce actualiza Slack con IA y mejora la colaboración empresarial

Salesforce ha presentado una actualización de Slack que incluye un asistente virtual mejorado, Slackbot, con capacidades de IA para gestionar tareas, resumir reuniones y conectar...

Financiación récord

OpenAI recauda 122 mil millones y se prepara para OPI

OpenAI ha recaudado 122 mil millones de dólares en una ronda de financiación, valorándose en 852 mil millones. Con más de 900 millones de usuarios...

Cierre inesperado

Yupp.ai cierra tras atraer 1,3 millones de usuarios

Yupp.ai, una startup de inteligencia artificial, cerró menos de un año tras su lanzamiento, a pesar de atraer 1,3 millones de usuarios y recibir 33...

Asistente inteligente

Alexa+ revoluciona pedidos a domicilio con interacciones personalizadas

La llegada de Alexa+, el nuevo asistente de Amazon, transforma la experiencia de pedir comida a domicilio mediante interacciones naturales y personalizadas. Aunque ofrece comodidad...

Datos estructurados

NomadicML recibe 8,4 millones para revolucionar datos en IA autónoma

NomadicML, una startup emergente, ha desarrollado una plataforma que convierte grabaciones en conjuntos de datos estructurados para mejorar el entrenamiento de modelos de IA en...

Desconfianza creciente

Creciente adopción de IA en EE. UU. pero baja confianza

La adopción de la inteligencia artificial en Estados Unidos crece, pero la confianza en ella es baja. Un estudio revela que el 76% desconfía de...

Gemelos digitales

Mantis Biotech revoluciona la medicina con gemelos digitales humanos

Mantis Biotech ha desarrollado una plataforma que crea gemelos digitales del cuerpo humano mediante la recopilación de datos de diversas fuentes. Esta tecnología permite simular...