В Южной Африке разработали ИИ для перевода языка жестов в речь
Система распознает движения и жесты, преобразует их в текст и затем озвучивает перевод
Выпускник Университета Квазулу-Натал (UKZN) Ахил Хансрадж разработал систему на основе искусственного интеллекта, которая способна переводить южноафриканский язык жестов (SASL) в речь в реальном времени. Об этом сообщает IOL.
Система использует компьютерное зрение и специальную модель искусственного интеллекта для отслеживания движений тела и распознавания жестов. После этого распознанные буквы и слова преобразуются в текст, а затем – в голос с помощью технологии синтеза речи. Для обучения системы Хансрадж создал собственный набор данных, адаптированный к южноафриканскому языку жестов.
Разработка имеет для выпускника личное значение. Оба его родителя имеют нарушения слуха и сталкивались с трудностями при общении в банках, государственных учреждениях и муниципальных службах. По словам Хансраджа, ему и его сестре часто приходилось сопровождать родителей и говорить за них. Он надеется, что в будущем усовершенствованная версия системы позволит людям с нарушениями слуха общаться увереннее с собеседниками, которые не знают языка жестов.
Южноафриканский язык жестов недавно получил статус 12-го официального языка страны.