Caminho da tecnologia em tempo real
Para o requisito de 30 fps em tempo real, é necessário um esquema de renderização híbrido:
- Modelo leve: Uso
--prune_ratio 0.6
Modelo NeRF de compressão de parâmetros com aceleração TensorRT (é necessário converter o formato .plan) - Otimização do cone de visãoAdicionar no estágio de inferência
--view_cone 60
Reduzir os cálculos do 50% limitando a variedade de pontos de vista gerados - pipeline assíncrono8 ângulos de base (um para cada 45°) pré-gerados pelo cache Redis, quadros intermediários interpolados dinamicamente
Recomendações para a seleção de hardware
- Solução de nó único: NVIDIA RTX 6000 Ada (48 GB de memória de vídeo) + CUDA 12.2
- Programa de cluster: 4 A10G (24 GB) por meio deMinkowskiEngineinferência distribuída
- Solução móvel: textura EGL com resolução de 256×256, fornecida via WebGL 2.0
Essa resposta foi extraída do artigoDiffPortrait360: gere visualizações de cabeça em 360 graus a partir de um único retratoO