Ensenas: Инновационный инструмент для улучшения коммуникации

Создание цифровой платформы для обучения мексиканскому жестовому языку

Дизайнеры Saeli Seira Saenz и Alana Betanzo Carriles разработали уникальный инструмент, основанный на технологии машинного обучения, для улучшения коммуникации и опыта людей с нарушениями слуха в Мексике.

Вдохновение для создания проекта Ensenas пришло из-за отсутствия образовательных ресурсов и инструментов по мексиканскому жестовому языку. Это привело к созданию цифровой платформы, которая способствует осознанию и включению этой проблемы в общество.

Основной особенностью проекта является использование технологии машинного обучения для реализации инструмента, который осуществляет чтение мексиканского жестового языка в реальном времени. Это позволяет преодолеть проблему коммуникации между людьми с нарушениями слуха и теми, у кого таких нарушений нет, без необходимости изучения жестового языка.

Для реализации проекта была разработана модель и набор данных машинного обучения, что позволило создать новые инструменты и возможности для людей с нарушениями слуха. Результатом стала платформа, на которой любой может узнать больше о проекте и скачать модель машинного обучения.

В процессе разработки проекта были преодолены многие творческие, технические и исследовательские проблемы. Первым шагом стало создание набора данных из 400 видео с наиболее используемыми словами мексиканского жестового языка. Затем был проведен процесс предсказания позы, в котором модель анализировала содержание набора данных, анализируя каждый кадр с помощью ML pipe pose Estimation.

Проект Ensenas был удостоен престижной награды A' Social Design Award в 2023 году, что подтверждает его вклад в создание лучшего мира через интеграцию лучших практик отрасли и компетентных технических характеристик.