Revolúcia v dabingu? AI preloží video, použije váš hlas a upraví aj pohyb vašich pier

Spoločnosť D-ID, ktorá sa pred časom dostala do pozornosti nástrojmi na animáciu a oživovanie starých fotografií, teraz predstavuje nový prekladač videí na báze umelej inteligencie. Nástroj pod názvom AI Video Translate prekonáva tradičné limity a ide oveľa ďalej, než je len automatický preklad videa.
Revolučný prekladač videí s klonovaním hlasu a synchronizáciou pier
Po úspechu s animovaním fotografií a získaní 25 miliónov dolárov od investorov prichádza spoločnosť D-ID s nástrojom umelej inteligencie, ktorý popri automatickom preklade videí do iných jazykov dokáže zároveň klonovať hlas hovoriaceho a synchronizovať pohyby jeho pier s preloženým textom. Funguje na báze vlastného modelu spoločnosti pod označením Rosetta-1.
Nový nástroj by mohol výrazne znížiť náklady na lokalizáciu a pomôcť malým kreatívcom osloviť globálne publikum.
D-ID Introduces AI Tool for Advanced Multilingual Video Translation and Lip Syncinghttps://t.co/7HY6jdIfKL#AI #AINews #ArtificialIntelligence #software #techblog @D_ID_ pic.twitter.com/5UMJxvb8nh
— Multiplatform.AI (@MultiplatformAI) August 24, 2024
Spoločnosť D-ID ponúka túto technológiu svojim predplatiteľom zadarmo, čo môže výrazne uľahčiť lokalizáciu kampaní pre medzinárodný trh.
S podporou pre 30 jazykov vrátane arabčiny, mandarínčiny, japončiny, hindčiny, španielčiny a francúzštiny môžu tvorcovia rýchlo prispôsobiť obsah širokému publiku. Táto technológia by mohla konkurovať existujúcim riešeniam pre dabing a AI video, ktoré sa rýchlo stávajú dostupnejšími aj pre menších tvorcov.
Ukážka prekladu so synchronizáciou pier:
D-iD launched AI Video Translate, instant AI-generated multilingual videos
The feature clones the speakers voice and changes their lip movements to match the translated words in secondspic.twitter.com/8daY4Y4V7e
— Rowan Cheung (@rowancheung) August 23, 2024
Vývoj v oblasti prekladu a dabingu pomocou AI
Trh s prekladmi a dabingom videí zažíva dynamický rozvoj. YouTube nedávno predstavil funkciu viacjazyčného audia, ktorú využíva aj známy tvorca MrBeast na preklad svojich videí do 11 jazykov. Podobné nástroje, ktoré umožňujú preklad a dabing videí v reálnom čase s využitím AI, predstavili aj ďalšie platformy ako Vimeo, Microsoft či ElevenLabs.
Spoločnosť D-ID vydaním nástroja AI Video Translate rozširuje svoje portfólio a stáva sa kľúčovým hráčom v oblasti AI prekladov a lokalizácie videí.
Zdroj: TechCrunch
Najčítanejšie články
Sam Altman: OpenAI vie, ako vytvoriť umelú všeobecnú inteligenciu
10. januára 2025
Nvidia predstavuje osobný AI superpočítač za 3000 dolárov
10. januára 2025
ChatGPT v roku 2025: Čo nové nám Sam Altman sľubuje?
6. januára 2025
Od jednotlivcov po značky: Pika 2.0 formuje budúcnosť video obsahu
23. decembra 2024