Команда специалистов из лаборатории Facebook AI обучила искусственный интеллект составлять рецепты приготовления блюд на основе из фотографий. Создание новой системы потребовало разработки сложных алгоритмов, которые могли бы по одной фотографии идентифицировать все ингредиенты блюда и порядок его приготовления. Сначала в работу вступают кодер изображения и декодер ингредиентов, который распознает составляющие блюда на основе его визуальных особенностей, извлеченных с фотографии. Затем кодер ингредиентов и декодер команд составляют название и руководство по приготовлению блюда. По словам разработчиков, за счет своей сложности интеллектуальные системы распознавания еды по фотографиям гораздо точнее справляются с задачей, чем системы компьютерного зрения. Так, нейросеть должна уметь определять не только состав блюда, но и учитывать, что во время приготовления продукты могут деформироваться и взаимодействовать друг с другом.
Светлана Попова