Site icon AppTractor

Интеграция MediaPipe в Android-приложение видеоконференцсвязи

Процесс перехода на ML-фреймворк MediaPipe с более высокоуровневых инструментов (ML Kit и OpenCV), которые использовались для обработки видеопотока между камерой устройства и видеоконференцией, основанной на WebRTC.

Отказ от существующего решения позволит решить проблему высокой нагрузки, снизит размер приложения и позволит достичь большей гибкости процесса обработки кадров.

Основная задача при переходе на MediaPipe — разработка архитектуры взаимодействия с фреймворком, позволяющей переключать режимы работы в реальном времени, а также отдавать параллельно видеопоток нескольким потребителям.

Exit mobile version