Google сегодня представил новую модель EmbeddingGemma 2, которую можно использовать для того, чтобы «организовывать, искать и связывать информацию непосредственно на пользовательских устройствах». Чтобы продемонстрировать её возможности, Google создала приложение для Mac под названием AI Edge Foresight — инструмент для «интеллектуального ведения заметок».
EmbeddingGemma 2 «может помочь найти конкретный фрагмент видео по голосовой заметке или выполнить поиск по многочасовым аудиозаписям с помощью текстового запроса — и всё это обрабатывается одной нативно мультимодальной моделью».
Модель с 740 миллионами параметров построена на архитектуре Gemma 4 и распространяется по лицензии Apache 2.0. Она рассчитана на локальную работу «при жёстких ограничениях ресурсов»:
С квантованием на Google Pixel 11 Pro EmbeddingGemma 2 требуется всего около 191 МБ активной оперативной памяти для весов, работающих только с текстом, и около 567 МБ для полной мультимодальной модели.
Для демонстрации возможностей модели доступны примеры в Google AI Edge Gallery на Android и iOS. Но главным демонстрационным проектом стало новое приложение для Mac — Google AI Edge Foresight.
Во время видеозвонков или очных встреч это приложение для заметок слушает происходящее в фоновом режиме, поэтому вам достаточно «быстро набрасывать короткие пункты о том, что вы хотите запомнить».
Используя EmbeddingGemma 2, приложение «мгновенно превращает эти краткие заметки в полноценные, аккуратно оформленные записи на основе расшифровки встречи». При этом и расшифровка, и аудио обрабатываются полностью на вашем устройстве, а не в облаке.
Ещё одна возможность позволяет «указать Google AI Edge Foresight папки проектов, справочные материалы, диаграммы и календарь». Приложение поддерживает локальные файлы и Google Drive, после чего ему можно задавать вопросы и быстро получать нужную информацию. Оно автоматически понимает контекст вашей работы, не требуя вручную организовывать файлы, чтобы важная информация всегда была доступна именно тогда, когда она понадобится.
Функция чата предлагает «диалоговый поиск и создание кратких изложений на основе вашей персональной базы знаний». Также есть функция Live Assistance, которая будет «слушать и автоматически отвечать на вопросы».
Скачать Google AI Edge Foresight можно здесь. Приложение присоединяется к двум другим Mac-приложениям Google из этой линейки: AI Edge Gallery и AI Edge Eloquent для офлайн-транскрибации.