Приложение из MIT получает рецепт приготовления по фотографии блюда

Искусственный интеллект уже научился отличать хот-доги от всего остального. Теперь можно приступить к их конструированию. Команда pic2recipe из Массачусетского Технологического использует нейронную сеть для распознавания изображения еды и определения ингредиентов, из которых она приготовлена.

pic2recipe использует Food-101 Data Set для определения самой еды – это база из 101,000 фотографий, собранная еще в 2014 году. Поверх накатывается база Recipe1M с одним миллионом рецептов, собранная самими разработчиками с разных сайтов. И так получается магия. Но, пока, работает она не до конца – правильный рецепт получается примерно в 65% случаев.

Проблема в исходной фотографии блюда – правильно распознать ее довольно трудно, так как возможен разный масштаб, разное освещение, а оладушек вовсе может оказаться панкейком.

Команда признает, что с pic2recipe предстоит еще много работы, и пока не планирует выводить ее на рынок.