Amazon anuncia nuevas herramientas para controlar los modelos de lenguaje y evitar respuestas inapropiadas
En el evento AWS re:Invent que se está celebrando en Las Vegas, el CEO de Amazon Web Services (AWS), Adam Selipsky, ha anunciado una nueva herramienta llamada "Guardrails for Amazon Bedrock". Esta herramienta tiene como objetivo proporcionar un mayor control sobre los modelos de lenguaje utilizados en aplicaciones de inteligencia artificial, permitiendo a las empresas definir y limitar los tipos de lenguaje que un modelo puede utilizar.
En una publicación de blog, Amazon explica que con Guardrails for Amazon Bedrock, las empresas pueden implementar salvaguardias para ofrecer experiencias de usuario relevantes y seguras, alineadas con las políticas y principios de la compañía. Esta herramienta es especialmente útil para evitar respuestas inapropiadas o ofensivas que podrían dañar la reputación de una marca.
Controlando las respuestas de los modelos de lenguaje
La nueva herramienta de Amazon permite a las empresas definir temas que están fuera de los límites del modelo de lenguaje, de modo que no responda a preguntas irrelevantes. Por ejemplo, una empresa de servicios financieros puede evitar que el modelo de lenguaje proporcione consejos de inversión inapropiados que los clientes puedan tomar en serio. Además, es posible filtrar palabras y frases específicas para eliminar cualquier tipo de contenido ofensivo.
Amazon también ofrece la opción de filtrar datos de información personal identificable (PII, por sus siglas en inglés) para evitar que los modelos de lenguaje accedan a datos privados al proporcionar respuestas. Esto es especialmente importante en términos de privacidad y seguridad de los datos.
El desafío de desarrollar inteligencia artificial responsable
Según Ray Wang, fundador y analista principal de Constellation Research, esta herramienta puede ser fundamental para los desarrolladores que trabajan con modelos de lenguaje, ya que les ayuda a controlar las respuestas no deseadas. Wang destaca que uno de los mayores desafíos en la creación de inteligencia artificial responsable es garantizar la seguridad y facilidad de uso. La filtración de contenido y la protección de la información personal son dos de los principales desafíos a los que se enfrentan los desarrolladores. Además, destaca la importancia de la transparencia, explicabilidad y reversibilidad en el desarrollo de modelos de lenguaje.
Disponibilidad y próximos pasos
La función de guardrails anunciada por Amazon está actualmente en versión de prueba. Se espera que esté disponible para todos los clientes el próximo año. Esta herramienta representa un paso importante en el control de los modelos de lenguaje utilizados en aplicaciones de inteligencia artificial, permitiendo a las empresas garantizar respuestas relevantes y seguras para los usuarios, al tiempo que evitan cualquier tipo de contenido inapropiado u ofensivo.
Otras noticias • IA
Estudiantes de Stanford protestan contra Google por ética empresarial
La protesta de estudiantes en la graduación de Stanford contra Sundar Pichai de Google refleja el descontento juvenil por la complicidad de la empresa en...
Gobierno de EE.UU. genera incertidumbre en el sector tecnológico
La intervención del gobierno de EE.UU. en Anthropic, un laboratorio de IA, ha generado incertidumbre en el sector tecnológico. Las medidas de control de exportaciones...
Meta potencia Facebook con inteligencia artificial y nuevas funciones
Meta está intensificando sus esfuerzos en inteligencia artificial con nuevas funciones en Facebook, como el "AI Mode" para búsquedas más naturales y herramientas creativas para...
Salesforce compra Fin por 3.600 millones para mejorar atención
Salesforce ha adquirido Fin, una plataforma de servicio al cliente basada en inteligencia artificial, por 3.600 millones de dólares. Esta compra busca mejorar la experiencia...
Expertos piden a EE.UU. levantar restricciones a modelos de Anthropic
Un grupo de 76 expertos en ciberseguridad ha solicitado al gobierno de EE.UU. que levante las restricciones a los modelos Fable y Mythos de Anthropic,...
Sarvam recauda 234 millones y alcanza valoración de 1.500 millones
Sarvam, una startup india de inteligencia artificial, ha recaudado 234 millones de dólares, alcanzando una valoración de 1.500 millones. Con el apoyo de HCLTech, busca...
NewCore recauda 66 millones para ciberseguridad e IA
NewCore, una startup de ciberseguridad, ha recaudado 66 millones de dólares para gestionar identidades humanas y de agentes de IA. Con un enfoque innovador y...
Meta cancela adquisición de Manus por tensiones geopolíticas con China
El desmantelamiento de la adquisición de Manus por parte de Meta refleja las crecientes tensiones geopolíticas entre Estados Unidos y China en el sector tecnológico....
Lo más reciente
- 1
El sector tecnológico se reestructura para mayor agilidad y eficiencia
- 2
Plaud vende dos millones de dispositivos y supera 100 millones en ingresos
- 3
NAACP demanda a xAI por impacto ambiental en Memphis
- 4
Probably recauda 9 millones para mejorar precisión en IA
- 5
SpaceX compra Cursor por 60 mil millones para liderar IA
- 6
India bloquea Telegram para frenar fraude en examen NEET
- 7
ChatGPT pierde terreno ante Gemini y Claude en IA

