Se anuncia la herramienta de traducción de videos D-ID AI que puede producir videos doblados en varios idiomas

D-ID, una startup de Inteligencia Artificial (IA) con sede en Tel Aviv, lanzó el miércoles una herramienta de traducción de videos impulsada por IA en versión beta. Traducción de video traducida, la aplicación puede producir videos traducidos que imitan la voz del hablante original y sincronizan el discurso para que coincida con las palabras. Esta función está actualmente disponible para los suscriptores de la plataforma y la compañía dijo que estará disponible de forma gratuita por tiempo limitado. La aplicación competirá con plataformas similares como ElevenLabs, Speechify y otras.

La startup de IA anunció el lanzamiento de una función de traducción de vídeos en una publicación en X (antes conocido como Twitter). La nueva herramienta se une a las ofertas existentes de la plataforma, como la creación de vídeos con IA basados ​​en avatares, la creación de agentes con IA y la creación de campañas de vídeo impulsadas por IA. Video Converter está actualmente disponible en versión beta en la web. Si bien D-ID tiene aplicaciones para iOS y Android, actualmente no admiten esta función.

con uno nuevo Una herramienta de inteligencia artificiallos usuarios pueden cargar un archivo de video a su dispositivo o descargarlo desde un servidor en la nube. Actualmente, el tamaño de archivo admitido es de 2 GB y los formatos de archivo admitidos incluyen MP4, MOV y MPEG. 360 staff tools pudieron probar la plataforma y descubrieron que funciona como se describe, aunque la sincronización de labios y la voz AI parecen un poco antinaturales y robóticas, y la clasificación de los videos generados por AI será muy fácil.

Sin embargo, existen una serie de limitaciones a la hora de reproducir un vídeo. La traducción de video solo funcionará si solo hay una persona en el cuadro de video, y la persona está mirando hacia adelante y su rostro es visible en todo momento. Además, el ruido de fondo o la música pueden estropear la calidad de la generación. Además, la plataforma no edita vídeos si el hablante es un personaje famoso o conocido que aparece en ellos.

La aplicación D-ID Video Translate puede traducir videos en 30 idiomas diferentes. Algunos de ellos incluyen árabe, chino, inglés, francés, alemán, hindi, italiano, japonés, coreano, ruso, tamil y turco.

Actualmente, esta función está disponible para todos los suscriptores de la plataforma. Los usuarios pueden registrarse en D-ID registrando una ID de correo electrónico de forma gratuita. La clase gratuita recibirá 20 créditos, que no se cobran una vez agotados. Las suscripciones pagas comienzan en $56 (aproximadamente Rs. 4700) por año y ofrecen 40 créditos por mes. El plan más caro costará 2.263 dólares (alrededor de 1.90.000 rupias) al año y ofrece 700 créditos al mes. La startup también ofrece proyectos orientados a los negocios.

Fuente