GTA 5_Повний Український дубляж через ElevenLabs

Painbest · 2023-12-15 12:26

Всім привіт. З виходом нового інструменту AI Dubbing на сервісі ElevenLabs https://elevenlabs.io/, виникла ідея дублювати усі катсцени та сюжетні аудіодоріжки GTA5 (Уявіть почути оригінальний голос Франкліна чи Тревора Українською). ось посилання на приклад роботи сервісу https://youtu.be/QdPEZVt45Zc
Оскільки дубляж автоматичний це можна реалізувати за короткий проміжок часу, не потрібно виписувати діалоги наймати акторів і т.д..
Все що потрібно закинути аудіофайли на сервіс і на виході отримати готові дубльовані файли. Я зробив невеликі тести чи вартує воно того. І скажу що на разі немає жодного методу зробити це так швидко та ефективно. Результати тестових перекладів я докладу до цього повідомлення. Я готовий реалізувати цей проєкт, адже знаю як це зробити і якими інструментами. Наразі є лише одна проблема - це фінансування.
По моїх підрахунках на весь переклад потрібно 760 доларів.
Це гроші за підписку на сервіс, достатньо щоб дублювати всі необхідні аудіодоріжки.

Якщо є охочі допомогти реалізувати цей проєкт і вкласти у це кошти, то я готовий реалізувати його і викласти готовий мод. За свою роботу і за готовий мод я ніяких коштів не хочу. Для мене головна мета поширювати Українську мову і показувати сучасному геймдеву, що попит на українське озвучування ігор є значно більший ніж здається і що в це варто вкладати кошти при розробці ігор.

Я думаю що буде круто подарувати Українській спільноті таку чудову гру в українському звучанні. А завдяки ElrvenLabs це можна зробити швидко і не за космічні гроші.

Приклад роботи сервісу і приклад перекладу:
https://youtu.be/QdPEZVt45Zc
Це дубляж оригінальної аудіодоріжки_тут є трохи дефекти (автодубляжу) але це можна підправити

посилання на проєкт на патреоні https://www.patreon.com/user?u=61475871

Den116pro · 2023-12-16 19:27

ідея непогана, але сумніваюсь що озвучка потрібна саме для GTA, можливо є якісь інші ігри, яким озвучка точно не завадила б)

snt · 2023-12-17 12:13

GTA дубляж лише зашкодить. Навіть розробники не дозволяють її дублювати на жодні інші мови, лише перекладати субтитри

Ivan_ST · 2023-12-17 19:38

Ем, ну якщо все буде таке, як в ролику на ютубі, то це досить таки жахливо. Може колись ця технологія даватиме кращі результати, але поки звучить ніби якась любительська озвучка (в плані інтонацій) зроблена по якомусь жахливому машинному перекладу. При всій любові до української озвучки, таке їй тільки шкодить.

Painbest · 2023-12-18 11:22

Тут без дебагу результатів цієї нейронки не обійтися. На мою думку, якщо прогнати доріжки через сервіс, а потім відловити окремі баги, як от "ти в гусятах")) то можливо щось з цього і вийде. У нейронки серйозні проблеми з перекладом саме катцен, де є сторонні звуки що накладаються на голоси і коли персонажі перебивають один одного. Але коли проганяв доріжки з окремими репліками окремого персонажа, то таких шакальних артефактів не виникало. та є моменти коли використовуються усталені вислови або гангстерський жаргон, тоді вона не завжди знає як це перекласти і видає дослівний переклад який не несе сенсу.

Додано через 10 хвилин 7 секунд:

Den116pro
Якщо є пропозиції яка гра, то я готовий розглянути. тут головне, щоб масив діалогів не був гігантський, бо baldurs gate 3 точно не стягнемо)

Painbest · 2023-12-18 14:15

Поюзав ще трохи цей сервіс. Він добре перекладає та дублює окремі репліки персонажів, але катсцени не вивозить. тому думаю варто ще почекати коли технологію докрутять до нормального рівня. Інакше потрібно вручну дублювати 11 годин катсцен. навіть з цим інструментом буде довго і муторно.

Колодій Трейлерів · 2023-12-18 18:49

Ну, років через п'ять-десять, навіть актори дубляжу вже не будуть потрібні з такими темпами, виживуть тільки одноголосі озвучки))) Ну і головних проблеми дві - при дубляжі, це ліпсінг плюс переклад, а особливо адаптація жаргонів та незрозумілих слів рядовому глядачеві. Час у нас ще є))

Aldaron · 2023-12-18 22:59

Колодій Трейлерів
Насправді вже зараз можна отримати доволі пристойний результат, просто Painbest вирішив що можна натиснути одну кнопку, і отримати ідеальний дубляж, але це лише інструмент, і як будь-який інстрімент він потребує праці.
Ось мій результат всього лише двох днів експериментів: https://www.youtube.com/watch?v=RPp5iVh6mUg

Painbest · 2023-12-19 10:53

Aldaron
Ти правий, я переоцінив можливості сервісу. Найраціональніший варіант зараз - це клонувати голоси персонажів тим же сервісом і озвучувати ними текстові рядки діалогів кожного персонажа. Далі ці аудіофайли треба підігнати по таймінгах до оригіналів і замінити. Такий варіант дасть більше контролю при перекладі і налаштуваннях голосу, але значно виросте час розробки.

lambdist · 2023-12-19 14:24

Aldaron · 2023-12-19 16:33

lambdist
У KITS AI схоже майже нульовий функціонал у безкоштовній версії, я використовую rask ai поки є можливість. Доречі ось спроба зробити кат сцену Темного месії: https://www.youtube.com/watch?v=F0MnbzrfAX8

Den116pro · 2023-12-20 18:19

GTA 5_Повний Український дубляж через ElevenLabs

Переклад ігор українською

Обговорення