Після початку пандемії COVID-19 відеодзвінки стали більш поширеними, ніж будь-коли раніше. Щоб поліпшити їх якість, компанія NVIDIA представила набір інструментів, які можуть використати розробники додатків.
Платформа Maxine дозволяє здійснювати відеодзвінки з використанням хмарних сервісів Nvidia, які обробляють і покращують відео за допомогою алгоритмів машинного навчання. Зокрема алгоритми дозволяють змінити положення голови співрозмовника таким чином, щоб його погляд був спрямований в камеру. Міміка при цьому зберігається.
Крім того, функціонал платформи дозволяє зменшити вимоги до якості з’єднання відеодзвінків — система дозволяє захоплювати “ключові точки на обличчі”, а потім обробляє відео, підвищуючи його якість перед передачею на пристрій співрозмовника.
Серед інших особливостей Nvidia Maxine — підтримка перекладу з іноземної мови в реальному часі, можливість створювати анімовані аватари і використовувати якісні фони.
Maxine використовує прискорення NVIDIA Tensor Core GPU і працює в хмарі, тому вам не знадобиться одна з новітніх відеокарт NVIDIA для того, щоб використовувати ці функції. Вони повинні працювати на будь-якому пристрої.