Beautiful Me: Big Data и глубокая нейронная сеть для вашей кожи

Знаете ли вы, какой у вас на самом деле оттенок кожи? Как он меняется со временем? Beautiful Me – новое мобильное приложение, которое использует Big Data и глубокую нейронную сеть для создания профиля вашей кожи. Оно разработано компанией ModiFace, отметившейся уже «волшебным зеркалом» Sephora 3D Augmented Reality.

Beautiful Me работает на основе фотографий из Facebook, оно может загрузить до 500 ваших изображений, отобрать 100 лучших для анализа и определить цвет ваших губ и кожи.

The app was not found in the store. :-(

Go to store Google websearch

В основе приложения – четырехуровневая нейронная сеть. Первый уровень определяет, какие пиксели на фотографии дают достоверную информацию о коже, и отбрасывает остальные. Дальше сеть анализирует их и получает данные о цвете, оттенке кожи и других важных параметрах.

Мы натренировали нашу нейронную сеть на фотографиях, но ее обучение продолжается, — говорит Пархам Аараби, основатель и директор ModiFace. — Каждый раз, когда люди используют приложение, они тренируют нейронную сеть. Идея в том, что со временем она станет все лучше и лучше определять правильный оттенок кожи.

Нейронная сеть не первая технология, которую ModiFace использовала для этого приложения. Первой попыткой был простой сигнальный процессор, который работал не очень хорошо. Затем в дело вступили простые алгоритмы машинного обучения, которые работали лучше.

Но я слышал довольно много от исследовательского сообщества о глубоких нейронных сетях и насколько лучше они работают относительно других алгоритмов машинного обучения, – говорит Аараби. — Так что мы решили попробовать глубокую нейронную сеть в качестве замены, и поняли, что решение довольно интересное, и оно выдает один из лучших результатов, что мы могли получить.

Использование фотографий с Facebook также важная часть общей картины. Люди обычно ставят отметки, и это помогает определить кто есть кто на фотографии. Также социальная сеть предоставляет информацию о времени съемки, что позволяет отследить, как кожа менялась со временем.

Как компания собирается монетизировать приложение? За счет рекомендации продуктов. На основе полученной информации, приложение может посоветовать пользователю набор косметических продуктов, которые подойдут ему больше всего.

С другой стороны, кожа человека меняется не так часто, чтобы пользователи открывали приложение периодически, что может стать проблемой для разработчиков.

Глубокое машинное обучение становится модной темой в области искусственного интеллекта. Его используют многие, от Netflix до Baidu, а теперь оно добралось и до «простых» приложений. И в следующий раз, когда приложение подберет вам крем или тени для глаз, вы будете знать, что стоит за этим.