Авторизация / Регистрация

[Libris]

Президент Crunchyroll Рауль Пурини стал гостем подкаста Decoder от The Verge и подтвердил, что компания уже испытывает генеративный искусственный интеллект для создания субтитров.

Делается это для «оптимизации процессов»: так стриминговый сервис сможет выпускать текстовый перевод на большем количестве языков и ближе к дате премьеры эпизода в Японии. Полагается на ИИ крупнейшая площадка с аниме и в других вопросах, например, чтобы помочь пользователям с выбором сериалов для просмотра.

А там и до нейросетевого озвучания рукой подать?

[Skuchniy]

Сообщение от Libris:

А там и до нейросетевого озвучания рукой подать?

Не сможет. С переводом с японского и так проблемы, а в цепочке японский-английский-другой с помощью ии явно будет обсер. Перевести то он переведет, но трешняк будет по смыслам.

[aWAtaRko]

Яндекс спокойно генерит сабы для русскоязычных видосов на ходу. Так что это работает. В основном всё упрется в перевод.

[Magos Bur]

Сообщение от Libris:

Делается это для «оптимизации процессов»

Ну и локализаторы-переводчики маленько так добзделись наезжая на всех вокруг

Сообщение от aWAtaRko:

Яндекс спокойно генерит сабы для русскоязычных видосов на ходу.

Вроде и со озвучкой даж было, в я-браузере.

[aWAtaRko]

Сообщение от Magos Bur:

Вроде и со озвучкой даж было, в я-браузере.

Озвучка работает только в ютубе и, по моим наблюдениям, генерится на основе автоматических сабов. Т.е гугл генерит английские сабы, яндекс переводит их и озвучивает. Суммаризация (пересказ) работает так же.
UPD: Озвучка работает со всеми видосами на ютубе, суммаризация только с видео с сабами.

Сабы же он генерит для любого видоса и на ходу, так что модель может быть встроена в сам браузер. Но это не точно.

Добавлено через 4 минуты

Так и есть:

Цитата:

Разрабатывая технологию, специалисты «Яндекса» значительно сократили объём оперативной памяти компьютера пользователя, которая потребляется при генерации субтитров. Исходная версия нейросети использовала 800 мегабайт и создавала слишком большую нагрузку на вычислительные ресурсы компьютера. После оптимизации потребление памяти удалось сократить до 150 мегабайт. Это позволило запускать нейросеть прямо в «Браузере», даже на обычных ПК с невысокой мощностью.

https://habr.com/ru/news/761246/

[Diavator]

Помнится, месяц назад был у меня тут диалог с одним завсегдатаем форума на тему что ИИ, по его мнению, не скоро привлекут к озвучке и переводу аниме, а я доказывала ему обратное. Ну вот, уже первые шаги сделаны - сабы. Еще пару месяцев и будут тестить озвучку и переводы. Яндекс давно озвучивает и переводит видосы в браузере вполне годно, даже с китайского, а он очень сложный по звучанию, нейронка его прекрасно понимает. Будущее стучится в дверь, открывайте!

[aWAtaRko]

Сообщение от Diavator:

даже с китайского, а он очень сложный по звучанию, нейронка его прекрасно понимает

Это где такое работает?

[fixeel]

Сообщение от Skuchniy:

Не сможет. С переводом с японского и так проблемы, а в цепочке японский-английский-другой с помощью ии явно будет обсер.

так он не будет через английский пропускать, а сразу на нужный. Но да - это будет обсёр.

Добавлено через 44 секунды

Сообщение от aWAtaRko:

Яндекс спокойно генерит сабы для русскоязычных видосов на ходу. Так что это работает. В основном всё упрется в перевод.

так перевод всё равно кривой. Даже с английского.

[Diavator]

Сообщение от aWAtaRko:

Это где такое работает?

Яндекс браузер, встроенный перевод и авто-озвучка, причем двухголосая.
Вот вам песенка на китайском, ради забавы.

YouTube (short)

Наводите в Яндекс Браузере мышкой и жмякаете Перевод и Озвучка. И наслаждаетесь содержание песенки)

[aWAtaRko]

Цитата:

Яндекс браузер, встроенный перевод и авто-озвучка, причем двухголосая.

Не, ютуб не интересен. Мне бы байду или билибили.

[Skuchniy]

Сообщение от fixeel:

так он не будет через английский пропускать

Ты наивен как дедсадовец.

[fixeel]

Сообщение от Skuchniy:

Ты наивен как дедсадовец.

так модели уже есть. Работа нейросети их использовать.