Нейросеть научилась переводить язык жестов в текст ИИ может перевести на японский до 5 тысяч знаков

Проект основан на системе перевода жестов в текст, применяющейся на видеоконференциях. В ходе разработки приложения алгоритмам было показано около 50 тысяч видео, на которых используется язык жестов. Нейросети должны были обнаружить характерные движения для каждого слова. Известно, что сейчас искусственный интеллект в приложении может перевести на японский язык до 5 тысяч знаков.

В данный момент SoftBank занята апгрейдом программы — она должна научиться распознавать более 100 вариаций одного жеста на слово. Предполагается, что официальный релиз приложения состоится в 2024 году.

Также в будущем компания планирует расширить функционал программы, разработав подобные системы и на других языках.