ИИ определил пищевую ценность блюда по фото
Немецкие исследователи разработали алгоритм, определяющий пищевую ценность блюд по фотографии: их калорийность и содержание белков, углеводов и жиров. В отличие от многих других подобных алгоритмов новый определяет эти показатели напрямую, а не обращаясь к базе данных о пищевой ценности разных продуктов. Кроме того, алгоритм пытается предсказать и ингредиенты блюд. Доклад об алгоритме будет представлен на конференции ICPR 2020, препринт доступен на arXiv.org.
Часть людей, сбрасывающих лишний вес или поддерживающих его на одном уровне, записывают приемы еды, отмечая ее пищевую ценность. Есть даже приложения, в которых этот процесс частично автоматизирован: если человек съел еду из магазина, на ее упаковку можно навести камеру, и приложение само добавит все данные в дневник потребления. Но это не подходит для самостоятельно приготовленной пищи и еды в кафе. В первом случае человек еще может рассчитать пищевую ценность, поскольку знает все компоненты, а во втором это можно сделать лишь очень примерно.
Исследователи в области компьютерного зрения уже несколько лет пытаются решить эту проблему. Как правило, алгоритмы по расчету пищевой ценности работают похожим образом: распознают на снимке блюдо и выдают соответствующие значения из базы. Также они могут учитывать размер блюда для более точного расчета калорий, хотя некоторые из недавних алгоритмов исходят из предположения, что перед камерой стандартная порция. Подобные многостадийные алгоритмы сложны в разработке и не очень точны, отмечают авторы новой работы во главе с Райнером Штифельхаге (Rainer Stiefelhage) из Технологического института Карлсруэ. Они использовали иной подход, в котором нейросеть за один этап рассчитывает пищевую ценность на основе фотографии.
В основе алгоритма лежит сверточная нейросеть для распознавания объектов (авторы использовали популярные сети ResNet и DenseNet), обученные на огромном датасете различных фотографий ImageNet. Использование предобученной сверточной нейросети — это популярный метод, позволяющий брать за основу алгоритм, который уже достаточно хорошо умеет определять признаки на изображениях, и дообучать его последние слои на своей конкретной задаче. В этом случае авторы не просто дообучали последний слой, а изменили его структуру: вместо классификации он решает задачу регрессии, то есть подбора конкретного значения, а не отнесения исходной фотографии к какому-то фиксированному классу объектов. Четыре нейрона последнего слоя выдают калорийность блюда и содержание базовых компонентов (белки, жиры, углеводы), а еще 100 нейронов выдают 100 самых вероятных ингредиентов.
Разработчики самостоятельно подготовили датасет для обучения алгоритма, воспользовавшись двумя источниками: сайтом рецептов, где у большинства рецептов есть список ингредиентов и фотография готового блюда, и базой пищевой ценности различных продуктов. Поскольку рецепты пишутся разными людьми и содержат лишние данные (например, один и тот же продукт может быть указан как «лук», «лук, нарезанный кольцами» и «лук, нарезанный кубиками», хотя для анализа пищевой ценности это один и тот же ингредиент), исследователям пришлось полуавтоматически обработать данные. В частности, они убрали лишние слова и перевели примерные величины (например, «одна столовая ложка») в конкретные. Затем они сопоставили данные с двух предварительно обработанных датасетов и собрали их в один, содержащий 70 тысяч рецептов и 308 тысяч фотографий.
Тестирование алгоритма на рецептах, которые он не встречал во время обучения, показало, что его точность при расчете на 100 грамм блюда составляет 46,7 калории, 2,51 грамма белка, 3,88 грамма жира и 6,97 грамма углеводов. Авторы отмечают, что результаты можно улучшить, если использовать более совершенные алгоритмы для предварительной обработки текстов из рецептов. Они не смогли опубликовать сам датасет из-за лицензионных ограничений, но опубликовали на GitHub код для его формирования и код самой нейросети.
Источник
Меню
Архив материалов
Подписка на новости
Новости криптозоологии
Хроники природных катастроф
Последние новости
26.01.2020 - 06.03.2020 (990)
07.03.2020 - 16.04.2020 (1010)
17.04.2020 - 19.05.2020 (1000)
20.05.2020 - 25.06.2020 (990)
26.06.2020 - 04.08.2020 (995)
05.08.2020 - 16.09.2020 (1005)
17.09.2020 - 26.10.2020 (990)
27.10.2020 - 27.11.2020 (990)
28.11.2020 - 07.01.2021 (990)
08.01.2021 - ...
Последние аномальные новости

В старой церкви живут призраки

Внутри загадочной ломаной пирамиды

Военная разведка США скупает данные о своих гражданах

Вокруг огромных черных дыр могут вращаться тысячи планет

Голикова оценила идею международных ковид-паспортов

Девять НЛО наблюдали в небе над Лас-Вегасом

Женщина годами жила в доме с полтергейстом

Женщина с самым красивым в мире лицом

За тайной Перевала Дятлова

Зафиксировано падение 7 метеоритов одновременно

ИИ готовит и моет посуду

Камера МКС запечатлела эскадрилью НЛО

Катя Лель засняла полет НЛО

Кейт Миддлтон поселилась в доме с привидениями

Контролировать обладающий сверхразумом ИИ невозможно

Кто наблюдает за нами из глубин космоса

Миллиардер объявил награду тем, кто докажет существование жизни после смерти

На Луне могут найти жизнь

Над Нидерландами и Бельгией наблюдали падение метеорита

Оптическая иллюзия с цветом платья телеведущей

Охоту на бигфута предлагают узаконить

Под Брестом заметили гигантский ледяной диск

Почему перед смертью люди видят одни и те же сны

Почему стоит посетить Мавринский майдан

Правительство США ждет астероид или десантные корабли инопланетян

Решили загадку числа 42

Световые столбы над канадским городом

Технологию 5G признали токсичной для человека

Уточнили массы и плотности семи планет системы TRAPPIST-1

Что такое парад планет с научной точки зрения

Охрана и безопасность

Какие двери приобрести для ванной комнаты и кухни

Аэротакси с пассажиром испытали в Лужниках

В Симпсонах нашли предсказание о наряде Камалы Харрис

ВВС США испытают аэротакси в 2021 году

Верная собака шесть дней ждала хозяина перед больницей

Во Фленсбургском метеорите нашли самые старые карбонаты

Все живое эволюционирует в крабов

Вырастили искусственную древесину

Главные метеоритные кратеры Эстонии

Глубина моря Кракена на Титане может достигать 300 метров

Женщина пошла в туалет и родила пятого ребенка

Землю ждет мега-землетрясение, которое затронет все континенты

Мужчина купил морковь и выиграл 12 млн

Мужчина очнулся после семи месяцев комы и получил обвинение в убийстве

Мужчина сорвал джекпот второй раз за 5 лет

На инаугурацию Байдена приходила голограмма Обамы

Нашли систему из шести звезд

Неизвестный сорвал джекпот в миллиард долларов

Обнаружен экзоюпитер без облаков и дымки в атмосфере

Огромного сома поймали возле Лувра

Основная версия происхождения коронавируса

Почерк выдает характер, темперамент и другие черты человека

Представили новую модель формирования планет Солнечной системы

Раскрыты пределы 6G

Растущее лицо счастья заметили на Марсе

Рыболовы поймали редкую щуку-маскинонга

Столетняя женщина ответила на вопрос о секрете долголетия

Существует ли на самом деле темная материя

Существуют невероятно большие черные дыры

Тайна летевшего за самолетом мандалорца

Французам порекомендовали не пользоваться телефонами

В письме 1813 года президенту США говорится о встрече с НЛО

Ведьма рассказала о детях, которые общаются с умершими

Голубых джетов и эльфов сняли с МКС

Два Папы, два президента. Куда катится мир

Демо-версия сдвига полюсов в Казахстане

Женщина сняла домогавшегося ее призрака

Загадочные артефакты нашли на древнем кладбище инков

Зачем Павел Глоба ввязался в большую политику

Казахстанские экстрасенсы опровергли предсказания Нострадамуса на 2021 год

Как КГБ использовал экстрасенсов и колдунов

Каким увидели наступающий год Ванга, Нострадамус и Матрона Московская

Климатическая пушка Китая станет ответом на погодное оружие США

Легенды общежития

Магия в Индонезии как повседневность

Майкрософт запатентовала чат-бота, который будет имитировать покойников

Мистические фото из прошлого, которым трудно найти объяснение

Мужчина нашёл в лесу могилу инопланетянина

Музыкант заявил, что видел НЛО

Оккультисты Аненербе. Что нацисты искали в СССР

Паранормальная Бурятия 2020

Пассажир самолёта запечатлел НЛО

Предлагается построить колонию на орбите Цереры

Предсказания ясновидящих о смещении полюсов сбываются

Призрак в заброшенной психбольнице

Секрет экстрасенсов нашли в детских переживаниях

Скелет инопланетянина оказался останками девочки

Суперспособности, которые есть у каждого родителя

Треугольный НЛО пролетел над Нью-Йорком

Финалистка Битвы экстрасенсов сделала предсказание на 2021 год

Что предсказал известный экстрасенс из Балакова

Выгодная скупка и утилизация бытовой техники

Водитель снял огни пролетающего над машиной НЛО

Девушка на Google Maps нашла чёрную дыру

Девушка сделала тест ДНК и нашла отца-миллиардера

Девушка сняла танец с привидением

Жизнь на Земле - случайность и удача

Звезда Смерти обнаружена у загадочной звезды

Мужчина переехал жить на отдаленный остров

На Марсе обнаружили следы множества ледниковых периодов

Нашли систему из двух карликов и экзопланеты

Обнаружили перья в короне Солнца

Певица рассказала о полтергейсте в квартире

Победитель Битвы экстрасенсов высказался о смерти Михаила Виноградова

Получили снимок колыбели каменистой экзопланеты

Разгадка тайны Лох-Несского чудовища

Разгадка тайны появления геоглифов Наски

Тартесс - очередная загадка истории

Увидели рождение новых лун у экзопланеты

Украинская чупакабра снова открыла кровавую охоту

Что видят люди после клинической смерти

Экстрасенс рассказал о способностях детей к ясновидению

Автомобильные номера с числом 39 запретили в Афганистане

Актриса сняла НЛО средь бела дня

Женщина раскрыла секрет долголетия

Житель Таиланда нашел дорогой кусок амбры

Землю передвинули на новую временную линию

Из мочевого пузыря женщины вытащили огромный камень

Иллюминаты. Заговор Просвещённых

Инопланетная цивилизация захватила Землю еще до нашей эры

Истории из новых рассекреченных документов ЦРУ

Как дожить до 100 лет

Кости динозавров на Луне

Мёртвая женщина потратила 3 года на доказательство обратного

Овчарка родила зелёного щенка

Описали способ получения энергии из черных дыр

Помогает ли медитация от стресса

Почему медиумы слышат духов

Почему у древних статуй отсутствуют носы

Разработали прибор для поиска драгметаллов на Луне и Марсе

Создан новый тип мяса из пробирки

Тайна Семи сестер созвездия Тельца

В Госдуме заявили о необходимости ковидных паспортов в России

В одном из потоков Млечного пути одновременно родились 468 звезд

Впервые наблюдали начало конца далекой галактики

Женщина нашла отправленное 16 лет назад послание в бутылке

Женщина пережила остановку сердца и рассказала о загробной жизни

Нашли древний папирус Книги мертвых и сотни других артефактов

Небо над Финляндией стало шокирующе зеленым

Никола Тесла и Маркони подслушали послания марсиан

Почему некоторые люди слышат мертвых

Почему пираты закрывали глаз повязкой

Приближается астероид или началась космическая война

Продвинутые древние существа из недр Земли

Разработчики игры предвидели будущее

Родился ребенок с антителами против коронавируса

Скалолаз на инвалидной коляске залез на небоскреб

Согласно легенде, шесть воронов должны охранять Лондонский Тауэр

Уникально легкая экзопланета

Упавший на жилой дом метеорит оказался полон сюрпризов

Четырех друзей напугал бигфут

Чудесный меч Жанны д'Арк

Актриса раскрыла секрет долголетия

Бигфута заметили в Канаде

Британцев официально готовят к Зомби-апокалипсису

Быстрый большой НЛО заметили в Северной Каролине

Встреча военного вертолета ВВС США с НЛО

Зачем Байдену дорисовали нимб

Ирландский политик стал свидетелем НЛО

Как сделать человека невидимым

Какие домашние животные вам подходят

Крупный метеорит взорвался над Испанией

Легенда о призрачном коте, живущем в подземельях Капитолия

Миф о влиянии 5G на распространение коронавируса

Нашли необъяснимую звезду

Несколько НЛО вошли в земную атмосферу над Пуэрто-Рико

Плотность астероидов на орбите Земли нарастает

Полеты с Ангелами. Необычная история Чарльза Линдберга

Создали рыб-роботов, которые умеют плавать косяками

Таинственное излучение указало на существование Новой физики

Третий глаз, чакра Аджна и энергетика человека

Фантастические небоскребы будущего

Чем можно вывести запах гари после пожара

Улетный криминальный сериал - Премьера

Артефакты времён исчезнувшей культуры Тиуанако

Боевой робот Type-X проходит полевые испытания

Водительские права хотят заменить на QR-коды

Города-призраки Казахстана

ИИ научился распознавать политическую ориентацию по фото

Как работает невозможный детонационный двигатель

Как ученые превратили водород в металл

Компания SpaceX вернет на Землю вино космической выдержки

Можно ли продлить жизнь в 5 раз

Оружие будущего. Чем собирается воевать армия США

Откуда пошло распространение COVID-19

Подписка на новости
Подписка на новостой RSS-канал сайта
Получать новости сайта по почте
Контактный адрес для любых сообщений
Наверх
Рейтинг@Mail.ru Яндекс.Метрика