Corte estendido: NVIDIA expande Maxine para edição de vídeo e apresenta pesquisa em conferência virtual 3D

Profissionais, equipes, criadores e outros podem aproveitar o poder da IA ​​para criar efeitos de áudio e vídeo de alta qualidade, mesmo usando microfones e webcams padrão, com a ajuda do NVIDIA Maxine.

O conjunto de kits de desenvolvimento de software acelerados por GPU e microsserviços nativos da nuvem permite que os usuários implementem recursos de IA que aprimoram efeitos de áudio, vídeo e realidade aumentada para serviços e plataformas de comunicação em tempo real. Maxine também expandirá os recursos de edição de vídeo, permitindo que as equipes alcancem novos patamares na comunicação por vídeo.

Além disso, uma demonstração da NVIDIA Research na conferência SIGGRAPH desta semana mostra como a IA pode levar a videoconferência para o próximo nível com recursos 3D.

A conectividade sem fio permitiu que as pessoas participassem de reuniões virtuais em mais locais do que nunca. Normalmente, a qualidade de áudio e vídeo é fortemente afetada quando um chamador está em trânsito ou em um local com conectividade ruim.

Os recursos avançados do Maxine em tempo real — como remoção de ruído de fundo, super resolução e contato visual — permitem que usuários remotos aprimorem as experiências de comunicação interpessoal.

Além disso, Maxine agora pode ser usado para edição de vídeo. Os parceiros da NVIDIA estão transformando esse fluxo de trabalho profissional com os mesmos recursos do Maxine que elevam as videoconferências. O objetivo ao editar um vídeo, seja um discurso de vendas ou um webinar, é envolver o público mais amplo possível. Usando o Maxine, os profissionais podem aproveitar recursos de IA que aprimoram os sinais de áudio e vídeo.

Com Maxine, um porta-voz pode desviar o olhar da tela para fazer referência a notas ou um roteiro, enquanto seu olhar permanece como se estivesse olhando diretamente para a câmera. Os usuários também podem filmar vídeos em baixa resolução e melhorar a qualidade posteriormente. Além disso, Maxine permite que as pessoas gravem vídeos em vários idiomas diferentes e exportem o vídeo em inglês.

Os recursos do Maxine que serão lançados em acesso antecipado este ano incluem:

O Maxine pode ser implantado na nuvem, no local ou na borda, o que significa que a comunicação de qualidade pode ser acessível de praticamente qualquer lugar.

Muitos parceiros e clientes estão experimentando videoconferências e edições de alta qualidade com Maxine. Dois recursos do Maxine – Eye Contact e Live Portrait – estão agora disponíveis em versões de produção na plataforma de software NVIDIA AI Enterprise. Eye Contact simula o contato visual direto com a câmera, estimando e alinhando o olhar do usuário com a câmera. E o Live Portrait anima o retrato de uma pessoa por meio de seu feed de vídeo ao vivo.

A empresa de software Descript pretende tornar o vídeo um elemento básico do kit de ferramentas de todo comunicador, junto com documentos e slides. Com o NVIDIA Maxine, profissionais e iniciantes que usam Descript podem acessar recursos de IA que melhoram seus fluxos de trabalho de conteúdo de vídeo.

“Com o recurso NVIDIA Maxine Eye Contact, os usuários não precisam mais se preocupar em memorizar scripts ou fazer repetições tediosas de vídeos”, disse Jay LeBoeuf, chefe de negócios e desenvolvimento corporativo da Descript. “Eles podem manter uma presença perfeita na tela enquanto acertam seu roteiro sempre.”

O aplicativo Camo da Reincubate visa ampliar o acesso a ótimos vídeos, aproveitando o hardware e os dispositivos que as pessoas já possuem. Isso é feito dando aos usuários maior controle sobre suas imagens e implementando um pipeline de processamento poderoso e eficiente para efeitos e transformação de vídeo. Usando tecnologias habilitadas pela NVIDIA Maxine, Camo pode oferecer aos usuários uma maneira mais fácil de obter criação de vídeos incríveis.

“A integração do NVIDIA Maxine ao Camo não poderia ter sido mais fácil e nos permitiu obter alto desempenho das GPUs RTX dos usuários imediatamente”, disse Aidan Fitzpatrick, fundador e CEO da Reincubate. “Com Maxine, a equipe conseguiu se mover mais rápido e com mais confiança.”

O Cre8 da Quicklink é uma poderosa plataforma de produção de vídeo para a criação de produções profissionais de marca, eventos virtuais e híbridos ao vivo. A interface amigável combina um design intuitivo com todas as ferramentas necessárias para construir, editar e personalizar uma produção com aparência profissional. Cre8 incorpora a tecnologia NVIDIA Maxine para maximizar a produtividade e a qualidade das produções de vídeo, oferecendo controle total ao operador.