Facebook научил нейросеть составлять рецепты блюд по фотографии

Facebook опубликовал исходный код нейронной сети, которая генерирует рецепт блюда по фотографии.

Алгоритм распознает ингредиенты, определяет, какой обработке их подвергли (нарезали, перемололи, пожарили, сварили и т.п.), а потом выдает рецепт в виде текста. База данных, которой оперирует нейросеть, насчитывает свыше 1 млн фотографий блюд. 

Точность работы алгоритма пока оставляет желать лучшего. Читатель издания TJournal прогнал через него фотографии нескольких популярных в России блюд (например, салата «Оливье», шавермы и быстрорастворимой лапши) — попаданий почти не было. Фотографию певца Дмитрия Маликова алгоритм определил как «суп с жареным красным перцем и луком». 

Чтобы запустить алгоритм, вам нужно сделать следующее: 

— открыть репозиторий Github;

— выбрать опцию Open in Colab;

— перейти во вкладку Runtime и выбрать Run All;  

— в блоке 22 исходного кода заменить ссылки параметра demo_urls на ссылки своих изображений; 

— во вкладке Runtime выбрать Run After; 

— Готово! 

Редакция MacDigger ведет канал в «Яндекс.Дзене». Подписывайтесь!