Нейросеть научилась переводить язык жестов в текст ИИ может перевести на японский до 5 тысяч знаков
Разработчик из Японии SoftBank создал приложение на основе нейросети, которое в реальном времени переводит язык жестов в текст на экране смартфона или ноутбука
Проект основан на системе перевода жестов в текст, применяющейся на видеоконференциях. В ходе разработки приложения алгоритмам было показано около 50 тысяч видео, на которых используется язык жестов. Нейросети должны были обнаружить характерные движения для каждого слова. Известно, что сейчас искусственный интеллект в приложении может перевести на японский язык до 5 тысяч знаков.
В данный момент SoftBank занята апгрейдом программы — она должна научиться распознавать более 100 вариаций одного жеста на слово. Предполагается, что официальный релиз приложения состоится в 2024 году.
Также в будущем компания планирует расширить функционал программы, разработав подобные системы и на других языках.
Использованные источники:
