Microsoft запустили мобильное приложение Seeing AI, позволяющее описывать и проговаривать происходящее на фотографии. Ранее писал о Blippar, сервисе, который как раз определял объекты по фото и строил семантическую сеть вокруг них. Blippar закрылся спустя три года, несмотря на огромные инвестиции, т.к. практического применения ему не нашлось.
Seeing AI же позиционируется как помощник слепым и слабовидящим людям. Сервис не только описывает объекты, находящиеся на изображении, но и поясняет отношения между ними. В приведенном примере приложение произносит «собака, сидящая за рулем автомобиля». Встроенная система распознавания лиц позволяет уточнить, что делают конкретные люди (по интеграции с адресной книгой). Например, «Дима вместе с Олей сидят на диване и смотрят телевизор. На коленях у них лежит собака».
Для Microsoft это прежде всего маркетинговый ход, но, возможно, из этого функционала все-таки получится вырастить практический инструмент.