O modelo QUEEN AI desenvolvido em conjunto pela NVIDIA e pela Universidade de Maryland trouxe avanços revolucionários nas áreas de realidade virtual e streaming de mídia. Este modelo pode realizar a troca livre de perspectiva em cenas como eventos esportivos, ao mesmo tempo em que comprime cada quadro de cenas 3D em apenas 0,7 MB e mantém uma velocidade de renderização surpreendente de 350 quadros por segundo, o que é difícil de alcançar com tecnologias anteriores. Este progresso inovador deve-se ao algoritmo exclusivo do QUEEN, que pode identificar e processar de forma inteligente partes variáveis da cena e melhorar a eficiência da computação, alcançando assim um equilíbrio perfeito entre taxa de compressão, qualidade visual, tempo de codificação e velocidade de renderização.
No campo da realidade virtual e streaming de mídia, a NVIDIA e a Universidade de Maryland trouxeram um avanço. Este modelo de IA denominado QUEEN não só permite que os espectadores alternem os ângulos de visão à vontade durante eventos esportivos, mas também comprime cada quadro da cena 3D para apenas 0,7 MB de tamanho, mantendo uma velocidade de renderização surpreendente de 350 quadros por segundo.
A chave desta tecnologia é o seu método de processamento exclusivo. A reconstrução tradicional de cenas 3D muitas vezes enfrenta o dilema de espaço de armazenamento excessivo ou baixa qualidade de imagem, e o QUEEN resolve esse problema de maneira inteligente. Ele usa algoritmos inteligentes para se concentrar na captura das partes variáveis da imagem e reutiliza elementos da cena que permanecem estáticos, melhorando significativamente a eficiência da computação.
Shalini de Mello, chefe de pesquisa da NVIDIA, falou sobre as principais vantagens do QUEEN: “Criamos uma solução que equilibra perfeitamente taxa de compressão, qualidade visual, tempo de codificação e velocidade de renderização. Esse equilíbrio permite um ponto de vista livre quase em tempo real”. A transmissão de vídeo é possível.
No nível técnico, o QUEEN adota uma estrutura inovadora de respingos gaussianos 3D para obter uma reconstrução de alta qualidade, aprendendo resíduos de atributos gaussianos entre quadros consecutivos. A equipe de pesquisa também desenvolveu uma estrutura esparsa quantizada, que combina um decodificador latente especializado e módulos de controle para otimizar ainda mais a eficiência do armazenamento de dados.
As perspectivas de aplicação desta tecnologia são emocionantes: os fãs de esportes podem escolher livremente o ângulo de visão durante os jogos ao vivo, o público dos shows pode obter uma experiência imersiva de realidade virtual e os alunos também podem escolher o mais adequado para si durante a perspectiva de ensino remoto para aprender habilidades. como culinária ou artesanato. Na área industrial, também pode auxiliar na gestão remota de armazéns.
Com uma velocidade de renderização tão rápida e efeitos visuais incríveis, QUEEN está redefinindo o futuro da experiência de streaming. Isto não é apenas um avanço na tecnologia, mas também abre uma nova era cheia de possibilidades para criadores e consumidores de conteúdo digital.
O surgimento do modelo QUEEN indica que a tecnologia de streaming media entrou numa nova fase de desenvolvimento. O seu potencial de aplicação em vários campos é enorme e vale a pena olhar para o futuro. Acredito que num futuro próximo seremos capazes de experimentar conteúdos digitais mais fluidos, realistas e envolventes.