SoftBank створила застосунок для перетворення жестової мови в текст
Японська SoftBank створила сервіс на базі АІ, який перетворює жестову мову в текст. Альфа-версію вже випробувало обмежене коло людей, а в загальному доступі застосунок може з‘явитися 2024 року, пише Assia Nikkei
Що сталося
2017 року SoftBank разом зі стартапом Abeja та Токійським університетом запустили дослідження AI-перекладача з жестової мови. Алгоритм вивчив понад 50 000 відео з характерними рухами рук під час жестової розмови.
Як він працює
Сервіс працює у всіх відеомесенджерах. Штучний інтелект спрацьовує, коли людина розмовляє, використовуючи мову жестів, і перетворює його в текст. Слова іншого співрозмовника так само автоматично перекладаються в текст.
Сьогодні сервіс розпізнає понад 5000 слів мови жестів і поки що підтримує тільки японську мову. У майбутньому розробники хочуть зробити платформу мультимовною.
Що далі
Наразі розробники ще працюють над підвищенням точності алгоритму. Проте вже в липні SoftBank зібрала перших добровольців для тестування платформи, а в найближчі місяці до системи отримають доступ організації, які допомагають людям із інвалідністю. 2024 року сервіс планують викласти в загальний доступ.