La lucha contra las deepfakes en la política se intensifica
Con la llegada de las elecciones de 2024, se prevé que sea la primera vez en la que el audio y video falso de los candidatos sea un factor importante. Un estudio reciente revela que los clones de voz de figuras políticas importantes, desde el Presidente hasta abajo, no reciben mucha resistencia por parte de las compañías de inteligencia artificial.
El Centro para Combatir el Odio Digital examinó 6 servicios de clonación de voz impulsados por IA: Invideo AI, Veed, ElevenLabs, Speechify, Descript y PlayHT. Intentaron que cada servicio clonara las voces de ocho figuras políticas importantes y generara cinco declaraciones falsas en cada voz.
El peligro de las deepfakes en la política
De las 240 solicitudes totales, en 193 ocasiones el servicio cumplió, generando audio convincente de un político falso diciendo algo que nunca ha dicho. ¡Incluso un servicio ayudó a generar el guion para la propia desinformación!
Un ejemplo fue un falso Primer Ministro del Reino Unido, Rishi Sunak, diciendo "Sé que no debería haber usado fondos de campaña para pagar gastos personales, fue un error y pido disculpas sinceras." Estas declaraciones no son fáciles de identificar como falsas o engañosas, por lo que no es sorprendente que los servicios las permitan.
Respuestas de los servicios de clonación de voz
Speechify y PlayHT fallaron en todas las ocasiones, bloqueando ninguna voz ni declaraciones falsas. Descript, Invideo AI y Veed utilizan una medida de seguridad en la que se debe subir audio de una persona diciendo lo que se desea generar, pero esto se pudo evitar fácilmente utilizando otro servicio sin esa restricción para generar el audio primero y usarlo como la versión "real".
De los 6 servicios, solo ElevenLabs bloqueó la creación del clon de voz, ya que estaba en contra de sus políticas replicar a una figura pública. Esto ocurrió en 25 de los 40 casos; el resto provino de figuras políticas de la UE que quizás la compañía aún no ha añadido a la lista.
El papel de Invideo AI
Invideo AI fue el que peor salió parado. No solo falló en bloquear ninguna grabación, sino que incluso generó un guion mejorado para un falso Presidente Biden advirtiendo de amenazas de bomba en los centros de votación, a pesar de que supuestamente prohíbe el contenido engañoso.
Ya hemos visto cómo un falso Biden puede combinarse (aunque no de manera efectiva aún) con llamadas robocalling ilegales para saturar un área determinada con falsos anuncios de servicio público. La FCC lo ha hecho ilegal, pero principalmente debido a las normas existentes sobre llamadas robocalling, no por nada relacionado con la suplantación de identidad o deepfakes.
Si plataformas como estas no pueden o no quieren hacer cumplir sus políticas, podríamos enfrentarnos a una epidemia de clonación en esta temporada electoral.
Otras noticias • IA
Microsoft prohíbe DeepSeek por preocupaciones de seguridad y desinformación
Microsoft ha prohibido el uso de la aplicación DeepSeek entre sus empleados debido a preocupaciones sobre la seguridad de datos y la desinformación, especialmente por...
OpenAI integra ChatGPT con GitHub para mejorar productividad de desarrolladores
OpenAI ha integrado ChatGPT con GitHub, permitiendo a los desarrolladores interactuar con su código de manera más eficiente. Esta herramienta mejora la productividad al facilitar...
Google lanza caché implícito en API Gemini para ahorrar costos
Google ha introducido el "caché implícito" en su API Gemini, permitiendo ahorros de hasta el 75% en costos de uso de IA. Esta funcionalidad automática...
Google refuerza la seguridad de Chrome con inteligencia artificial
Google ha mejorado la seguridad de Chrome con inteligencia artificial, implementando Gemini Nano para detectar estafas en tiempo real y ofreciendo protección avanzada contra phishing....
Clay alcanza valoración de 1.5 mil millones con cultura colaborativa
Clay, una startup de automatización de ventas, ha crecido rápidamente, alcanzando una valoración de 1.5 mil millones de dólares. Su enfoque en la participación de...
Inteligencia artificial revoluciona comercio electrónico con nuevas herramientas
La inteligencia artificial está transformando el comercio electrónico, como demuestra la herramienta "Enhance My Listing" de Amazon, que optimiza listados de productos. Aunque ofrece eficiencia,...
Concisión en IA aumenta riesgo de respuestas incorrectas según estudio
Un estudio de Giskard revela que la concisión en las respuestas de IA puede aumentar la probabilidad de "alucinaciones" o información incorrecta. Esto plantea un...
Fidji Simo es la nueva CEO de Aplicaciones en OpenAI
Fidji Simo asume como nueva CEO de Aplicaciones en OpenAI, destacando su experiencia en monetización y desarrollo de productos. Su liderazgo promete impulsar la innovación...
Lo más reciente
- 1
Epic Games y Spotify desafían a Apple con pagos directos
- 2
Rippling recauda 450 millones y alcanza valoración de 16.800 millones
- 3
Startups se reinventan ante adquisiciones y desafíos financieros
- 4
SoundCloud permite uso de contenido para entrenar IA sin compensación
- 5
Desmantelan redes que explotaban dispositivos IoT vulnerables globalmente
- 6
Google y Elementl Power impulsan reactores nucleares para energía sostenible
- 7
Usuarios preocupados por interrupción de servicio en X