ML-обработка медиапотоков в браузере на примере видеоконференций SberJazz

Спикеры расскажут, как внедряли в SberJazz обработку видео и аудио на примере технологии замены фона. Узнаем про захват и работу с видео/аудио в веб-браузере, интеграцию высокопроизводительных модулей (WASM, ML-рантаймов), обучение и оптимизацию ML-моделей для работы на клиенте.

Дмитрий и Роман покажут, как можно собрать свой пайплайн обработки медиа для вашего продукта. Подробно обсудим, почему они разработали свой внутренний движок для запуска ML-моделей и обработки на GPU с использованием WebGL.