Заснована українцями компанія "Respeecher" з допомогою штучного інтелекту (ШІ) створила синтетичний голос відомого словацького актора та коміка Юліуса Сатинського.
Щоб відтворити голос словацького актора у пятихвилинному відео, українські стартапери використовували техніку "deep learning", нейромережу, яка обробила години оригінальних аудіозаписів голосу словацької легенди. Використовуючи їх, модель ШІ навчилася розпізнавати повторювані шаблони в голосі Юліуса Сатинського, включаючи різні позиції та емоції.
Через спосіб обробки голосу "Speech to speech" вдалося створити звукову копію голосу чоловіка та створити слова, які він ніколи в житті не записував.
"Більшість обробленого контенту походить від аналогових записів, зроблених на початку 90-х. Останній із використаних записів голосу Юліуса Сатинського був зроблений у 1994 році", – пояснює Володимир Овсієнко, керівник відділу розвитку бізнесу української компанії Respeecher, яка створила синтетичний голос Юліуса Сатинського.
"Respeecher" проаналізували якість годин отриманого матеріалу, з якого відібрали 40 хвилин якісного матеріалу.
Загалом було створено 5 хвилин аудіоматеріалу з голосом Сатинського, який звучить у відеоролику компанії "Slovenská sporiteľna".
У головній ролі найновіші технології ШІ
Згодом український стартап почав використовувати записи для навчання моделі штучного інтелекту, яка розпізнавала та вивчала певні повторювані шаблони голосу Сатинського, зокрема різні позиції голосу та емоції. Окрім самого голосу, програма штучного інтелекту також навчилася розпізнавати та імітувати фонетику словацької мови. У цьому випадку штучний інтелект розпізнає мову не на рівні окремих слів, а на основі звуків, які зустрічаються в даній мові, і закономірності їх фонетичного розташування. Цей етап зайняв у штучного інтелекту близько 2 тижнів.
Потім "Respeecher" застосували голос Юліуса до фону, який записав у студії словацький актор Міхал Худак. Його завдання полягало в тому, щоб підібрати найбільш автентичний темп мови, інтонацію, фразування, акцент і матеріалізувати емоції в голосі, які б відповідали словесному вираженню Сатинського. Процес нанесення вже готового голосу на звукозапис зайняв близько тижня.
Родина актора підтвердила високий ступінь автентичності нових записів з оригінальним голосом Сатинського.
Унікальний завдяки світовому лідеру з України та новітнім технологіям
Це перший подібний проєкт у Словаччині і водночас перша словацька компанія, яка співпрацювала з українським стартапом Respeecher щодо створення голосу за допомогою штучного інтелекту.
"Respeecher" створений як стартап у 2018 році. Його заснували Олександр Сердюк, Дмитро Бєлєвцов і Грант Рібер. Сьогодні їх вважають світовим лідером у галузі використання штучного інтелекту та нейронної мережі, яка може створити точний профіль вибраного голосу на основі вхідних даних.
Потім його можна застосувати до мовлення іншої людини (зазвичай дублера), тим самим навмисно змінюючи його. Ця компанія стоїть за створенням голосу персонажа Дарта Вейдера в "Обі-Вані Кенобі" та персонажа Люка Скайвокера в "Мандалорці". Компанія "Respeecher" використовує технологію штучного інтелекту лише відповідно до юридичних стандартів і за згодою всіх власників авторських прав, включаючи родину.
Технологічний метод обробки голосу, яким займається "Respeecher", діаметрально відрізняється від більш поширеної технології "синтезу мовлення" (TTS), яку користувачі знають переважно з цифрових перекладачів, букрідерів або голосових помічників. TTS не може створити емоції з тексту, тому голос часто неприродний (так званий роботизований). Він також не враховує інтонацію голосу, керується лише заданим алгоритмом і пунктуацією в тексті.
Для довідки. Юліус Сатинський - словацький актор, комік, драматург, прозаїк, публіцист, письменник і автор дитячої літератури. Заслужений артист ЧССР (1989). Помер у 2022 р. на 61-му році життя. У Братиславі по вулиці Дунайській встановлено пам'ятник на честь Сатинського.