Lösung zur Integration von Motion Capture mit niedriger Latenzzeit
Der Aufbau eines digitalen menschlichen Echtzeitsystems erfordert Aufmerksamkeit:
- Hardware-KonfigurationBewegungserfassung in Echtzeit mit iPhone FaceID oder Intel RealSense.
- DatenpipelineKonvertierung von Motion-Capture-Daten in ein LHM-kompatibles Format über das SMPL-X-Plug-in von Unity.
- OptimierungsstrategieSchalten Sie das Echtzeit-Rendering aus und behalten Sie nur die Skelett-Animation bei. Die Latenzzeit kann auf 80 ms begrenzt werden.
- Alternatives ProgrammSenden von voreingestellten Bewegungsclips über Middleware-Brücken wie VTube Studio
Es wird empfohlen, den Test zunächst mit 30 FPS durchzuführen und dann zu versuchen, ihn nach der Stabilisierung auf 60 FPS zu erhöhen, und darauf zu achten, dass die Umgebungstemperatur unter 75 °C bleibt.
Diese Antwort stammt aus dem ArtikelLHM: Generierung bewegungsfähiger 3D-Menschenmodelle aus einem einzigen BildDie