В Японії розробили алгоритм, який зчитує мову жестів і перетворює її в текст

Японська компанія SoftBank створила штучний інтелект, який може допомогти жителям країни з порушенням слуху. Він вміє розпізнавати мову жестів та перекладати її на текст.

Про це повідомляє Asia Nikkei. 

Читайте також: Виявилося, що вірус коронавірусу існував багато тисяч років тому

Новий алгоритм

Перші кроки в роботі над алгоритмом зробили ще в 2017 році. Тоді у співпраці з розробниками зі стартапу Abeja і Токійського університету компанія створила алгоритм, який вивчив понад 50 тисяч відео з рухами рук. Вони характерні для спілкування мовою жестів. 

Сьогодні програма вміє розпізнавати приблизно 5 тисяч слів, необхідних для повсякденної розмови. Час обробки жесту та перетворення його на текст становить всього секунду або менше. 

Наразі розробники працюють на точністю системи, яка зараз оцінюється на рівні 90%, проте у випадку незвичайної жестикуляції може впасти до 50 відсотків. Аби підвищити ефективність роботи алгоритму, він повинен навчитися зчитувати понад 100 варіацій одного жесту.

Систему інтегрували у деяки популярні месенджери, але в які саме не уточнюють. Під час розмови алгоритм перетворює вимовлені за допомогою звуків слова одного мовця, перетворює їх на текст і передає співрозмовнику з порушеннями слуху. У відповідь він зчитує жести, також перетворює їх у слова і передає назад.

У липні SoftBank залучив добровольців до тестування технології. Найближчим часом систему очікують передати в користування компаніям, які спеціалізуються на підтримці людей з порушеннями слуху.

Більше про технології 

• В Apple розробили новий тип комп'ютерів. Згідно з заявленою інформацією, ноу-хау являє собою комп'ютер-моноблок, що складається з вигнутого донизу цільного шматка скла. На єдиній підкладці розташовані дисплей і клавіатура.
• 14 вересня компанія Apple проведе презентацію нового смартфона. У новій лінійці буде чотири моделі: iPhone 13 Mini, iPhone 13, iPhone 13 Pro, iPhone 13 Pro Max.

Більше оперативних новин шукайте в Telegram та Viber Новини.LIVE.