Ильяс Ахмеров, DION — Интеграция MediaPipe в Android-приложение видеоконференцсвязи

Ближайшая конференция: Mobius 2024 Spring, 23 мая (online), 31 мая – 1 июня (offline, Москва) Подробности и билеты: — — Процесс перехода на ML-фреймворк MediaPipe с более высокоуровневых инструментов (ML Kit и OpenCV), которые использовались для обработки видеопотока между камерой устройства и видеоконференцией, основанной на WebRTC. Отказ от существующего решения позволит решить проблему высокой нагрузки, снизит размер приложения и позволит достичь большей гибкости процесса обработки кадров. Основная задача при переходе на MediaPipe — разработка архитектуры взаимодействия с фреймворком, позволяющей переключать режимы работы в реальном времени, а также отдавать параллельно видеопоток нескольким потребителям. Ссылка на презентацию: