Нейросеть научили составлять рецепт по фотографии блюда (6 фото + видео)
Команда экспертов CSAIL из Массачусетского технологического университета научила созданную ими нейросеть составлять рецепты блюда только по фотографии. Совокупность Pic2Recipe ещё требует доработки, но в самое ближайшее время она, уверены исследователи, сможет подсчитывать энергетическую сокровище еды с картин, готовить её, отслеживать пищевые привычки конкретного пользователя и давать ему советы по верному питанию.
В качестве обучающей базы для нейросети употреблялись миллионы рецептов с профильных ресурсов. Помимо этого, она освоила все технологические процессы: запекание, жарку, тушение, варку и другое. По окончании анализа информация о готовых рецептах была удалена из сети, дабы Pic2Recipe смогла самостоятельно идентифицировать способ и ингредиенты изготовление блюда.
Другими словами она не ищет аналоги по изображениям, а применяет интеллектуальный подход.
До тех пор пока совокупность на практике может выяснить рецептуру в 65% случаев. Учитывая большой уровень сложности изготовление некоторых блюд, возможность применения специй, не всегда видимых на фото, итог более чем впечатляет. До тех пор пока Pic2Recipe оптимальнее удаётся трудиться с десертами, такими как кексы и печенье.
Сложнее дело обстоит с напитками, снеками, хлебом и супами.
В случае если работа будет продолжена, учёные собираются научить Pic2Recipe составлять завтраки, обеды, ужины отталкиваясь от перечня имеющихся в холодильнике продуктов и пищевых ограничений пользователя (аллергии, калорийность, запрет мучного, жареного и без того потом). Вероятнее, совокупность будет реализована в виде приложения для смартфона.
Источник: Pic2Recipe