В интернете завирусились ролики с использованием нейросети Heygen. Она переводит любое видео на английский и другие языки. При этом у говорящего сохраняется голос, а губы попадают в слова.
Что за нейросеть Heygen?
Полное название сервиса – Heygen Labs AI Translator. Нейросеть появилась в начале сентября 2023 года и быстро стала популярной. Все из-за функции перевода речи в видео.
Чтобы воспользоваться новинкой, нужно зайти на сайт Heygen и зарегистрироваться. На главной странице загрузить нужное видео и выбрать язык перевода.
Бесплатная тестовая версия позволяет перевести видео длительностью до 2 минут. Но этого хватает, чтобы перевести популярные мемы. Именно этим занялись пользователи, как только узнали о нейросети.
Как нейросеть переводит мемы
Первыми под эксперимент попали классические мемы – с Никитой Литвинковой и женщиной с кандибобером.
Также с помощью Hеygen перевели “Идущего к реке”, Евгения Понасенкова, Евгения Пригожина и других мемных персонажей. Чаще всего переводят на английский, но также встречаются немецкие, китайские, польские, белорусские или украинские версии мемов.
1.
В сети завирусилась нейронка от HeyGen Labs, которая может автоматически перевести любое видео, сохраняя интонацию оригинала, на восемь разных языков (английский, испанский, французский, хинди, итальянский, немецкий, польский, португальский). https://t.co/4QKK1dlUyy pic.twitter.com/eCjWG2MOyC
— Завтракаст • подкаст (@zavtracast) September 11, 2023
2.
нейросеть Heygen, которая может переозвучить видео, сохранив оригинальный голос в кадре, она даже перерисует губы, чтобы их движения совпали с выбранной речью и выглядели естественнее
Сервис бесплатный и можно попробовать самому на видео от 30 секунд
Вот вам шедевр! pic.twitter.com/5BbCNQXNWb
— Zönöv (@zonov_sl) September 11, 2023
3.
Heygen + Любовь и голуби pic.twitter.com/FW0BLAciNJ
— Dee (@freshand) September 10, 2023
4.
✋Евгений Николаевич выбрал правильный язык для некоторых своих видео.
(На самом деле нейросеть HeyGen научилась переводить видео, сохраняя не только оригинальные голоса персонажей, но и накладывая дипфейки на губы так, чтобы их движения совпадали с новой аудиорожкой) pic.twitter.com/efDOVo5RCT— 𝕬𝖑𝖊𝖐𝖘 𝕱𝖎𝖓𝖉𝖑𝖆𝖞 (@Alexfromsp13746) September 12, 2023
5.
Некоторые мемы выходят на междунардный уровень: нейросеть Heygen научилась переозвучивать видео на иностранные языки, сохраняя при этом оригинальный голос в кадре.
Более того, HeyGen накладывает дипфейки на губы так, чтобы их движения совпадали с новой аудиодорожкой.😂 pic.twitter.com/g6p1oyCfLH— ARSEN (@Ars7513) September 11, 2023
6.
Этой вашей новой нейросети ещё нужно многому обучиться, хотя я ожидал что будет хуже
HeyGen Oxxxymiron vs JohnyBoy pic.twitter.com/E2811qrNNo— TonyBenzo (@TonyBenzo1972) September 12, 2023
7.
Thanks to #HeyGen you can enjoy my favorite Russian video in existence.
It’s a popular meme with some guy walking to the river and speaking with the camera.
His monologue is the pinnacle of philosophy pic.twitter.com/ucvAEGSVuK
— Nikolai Baakh | Data Analyst (@BaakhOfficial) September 12, 2023
8.
HeyGen адчыніў партал у пекла ) pic.twitter.com/ePR0Znd8aZ
— Ігар Вожык Палынскі (@vozhyk_by) September 10, 2023
9.
@_neilor_ #боеприпасы #пригожин #heygen #ai ♬ оригинальный звук – NEILOR
А в чем мем…
В рекламе
женщина которая говорила про кандибобер умерла(((((