Казахский сурдоперевод при помощи ИИ запустили для детей с нарушениями слуха

В Казахстане начал работу проект автоматизированного сурдоперевода мультфильмов с использованием искусственного интеллекта. Теперь дети с нарушением слуха смогут смотреть популярные анимационные сериалы с переводом на казахский жестовый язык, передает Tengrinews.kz.

«Фиксики» на языке жестов

Пилотным проектом стала трансляция на телеканале Jibek Joly мультфильма «Фиксики» с сурдопереводом, реализованным в формате виртуального 3D-аватара. Цифровой персонаж воспроизводит жесты в режиме реального времени благодаря технологии на базе нейросетей.

Как работает система автоматического сурдоперевода

Инновационная система разработана на платформе SignBridge. Она автоматически анализирует аудиодорожку, преобразует речь в текст, а затем переводит ее на язык жестов, адаптированный для казахоязычных детей с нарушением слуха.

Казахский жестовый язык для самых маленьких: почему это важно

Как рассказала директор телеканала Jibek Joly Еркежан Кунтуган, на отечественных телеканалах практически отсутствует специализированный контент для людей с нарушениями слуха. Такие программы, как правило, не сопровождаются сурдопереводом, понятным этой аудитории.

«В настоящее время сурдоперевод осуществляется только для новостных программ и лишь в рамках требований законодательства, однако охват этих переводов крайне ограничен. По имеющейся у нас информации, в стране проживает около 5 тысяч детей с нарушением слуха, которым необходим сурдоперевод. Учитывая, что мы являемся семейным телеканалом, мы решили начать именно с детской аудитории. В утренние часы у нас транслируются мультфильмы в течение четырех часов, и у нас есть постоянные зрители», — отметила Еркежан Кунтуган.

Живые эмоции цифрового аватара: кто стоит за проектом 3D-сурдоперевода

Автором и руководителем проекта выступила доктор PhD Нурзада Амангельды — исследователь кафедры искусственного интеллекта Евразийского национального университета имени Гумилева. Она более 15 лет занимается созданием цифровых решений для людей с особыми потребностями.

«Она создала с помощью 3D персонаж, который выполняет сурдоперевод в мультфильмах. Это позволяет существенно упростить рабочий процесс и сократить временные затраты — в отличие от участия живого человека, которое требует гораздо больше ресурсов», — рассказала директор телеканала Jibek Joly Еркежан Кунтуган.

Напомним, в августе 2023 года мы рассказали, что Нурзада Амангельды разработала систему распознавания казахского языка жестов. Проект основан на искусственном интеллекте: система переводит жесты в текст в реальном времени и адаптируется под пользователя.

Нажмите сюда, чтобы получать самые важные новости в вашем WhatsApp

Источник: tengrinews.kz