Робоповара научили готовить по видеороликам Для начала восемь рецептов

Разработчики отмечают, что видеоконтент на самом деле может быть весьма ценным источником данных для автоматизированного производства продуктов питания и приготовления блюд. Команда ученых разработала восемь простых рецептов салата и сняла видеоролики процесса их приготовления. Затем при помощи нейросети специалисты обучили повара их готовить. Модель была запрограммирована на определение ряда различных объектов, включая фрукты и овощи, используемые в восьми рецептах.

При помощи машинного зрения робот проанализировал каждый кадр видео и смог идентифицировать в них различные объекты и движения рук. Из просмотренных 16 видео робот распознал правильный рецепт в 93% случаев, а действия человека-повара — в 83%. Вдобавок робот смог обнаружить небольшие изменения в рецепте, когда повар готовил двойные порции или намеренно ошибался.

Морковь, которую повар держал в руке, распознать было сложно — для этого роботу нужно было увидеть предмет целиком. Разработчики отмечают, что когда роботы научатся точнее определять ингредиенты в видеороликах, они смогут использовать для изучения рецептов даже YouTube.

Здесь мы рассказываем про автоматизацию в общепите: