Молодые перуанцы создали систему NeuroSing, способную переводить язык жестов в речь

В Перу проживает более 232 000 человек с нарушениями слуха, значительная часть которых использует язык жестов для общения. Зачастую они сталкиваются с трудностями при общении из-за этого ограничения, что в конечном итоге сказывается на их повседневной жизни и доступе к государственным услугам. В связи с этим двое молодых перуанцев создали систему, способную в режиме реального времени переводить жесты рук в речь. Речь идет о NeuroSign — инструменте, использующем искусственный интеллект для распознавания сообщений и преобразования их в звуковой контент. Истоки проекта. Нестор Рамос, студент факультета промышленной инженерии Университета Континенталь, рассказал газете La República, что идея возникла из его собственного опыта, который он пережил в феврале 2025 года. «Я был в магазине, когда увидел женщину, которая выглядела немного отчаявшейся. Я подошел, чтобы помочь ей, но она начала жестикулировать, потому что была глухонемой. Тогда я задался вопросом: как можно помочь людям, не знакомым с этим видом общения, понять тех, кто использует его по необходимости», — отметил он. 26-летний молодой человек поделился своей идеей в учебном заведении и, после ее доработки, подал заявку на участие в программе поддержки инновационных инициатив социальной направленности под названием FellowShip, которую курирует Лаборатория цифрового производства (FabLab). С этого момента он начал разрабатывать его при помощи Энджи Эрреры, инженера-мехатроника, выпускницы того же факультета, которая работает в этой области в университете. Голограмма, которую студенты надеются усовершенствовать. Принцип работы: NeuroSign — термин, образованный от слов «neurons» (нейроны) и «sing» (сигнал) — стремится к тому, чтобы жесты, улавливаемые камерой, интерпретировались с помощью искусственного интеллекта (ИИ) и преобразовывались в понятные голосовые сообщения, которые проецируются на визуальное голограммное изображение размером 30×50 сантиметров. Для достижения этой цели разработчики в рамках первой фазы работают над различными обновлениями. «Сейчас мы обучаем программу распознаванию языка определенных слов, в том числе «привет», «спасибо», «аплодировать» и «думаю». Мы сняли видео, показывая жесты по-разному и под разными углами, чтобы система захватила кадры и установила необходимые связи для распознавания», — пояснил Эррера.,Система находится на этапе распознавания жестов., Следующие задачи. Следующим шагом разработчики стремятся к тому, чтобы система запоминала больше слов благодаря более мощному процессору, а также уменьшить размер голограммы, чтобы сделать ее более мобильной и в будущем предоставить ее учащимся с потерей слуха в государственных школах. «Мы хотим помочь глухонемым людям, дать им больше независимости и облегчить общение с окружающими». «Чтобы их не исключали из различных сфер жизни и чтобы они могли жить спокойнее, без необходимости прибегать к услугам переводчика», — отметил Рамос. Подписывайтесь на La República в WhatsApp! Присоединяйтесь к нашему каналу со своего мобильного телефона и получайте самые важные новости из Перу и всего мира в режиме реального времени.