优化视角一致性的关键技术
GenXD采用以下方法确保多视图一致性:
- 运动分解模块:精准分离相机轨迹与物体运动,避免视角跳跃(运行
motion_decompose.py
提取运动参数) - 时间-空间联合建模:在diffusion过程中同步约束时空维度特征
- 相机参数控制: By
evaluator.camera_info
参数组精确设定方位角(azimuth)、仰角(elevation)和半径(radius)
Hands-on advice:1) 使用orbit
模式生成环绕视角时,设置azimuth_range=[-30,30]
限制角度变化范围;2) 增加num_context_views
参数值(建议3-5)提升关联性。
This answer comes from the articleGenXD: open source framework for generating videos of arbitrary 3D and 4D scenesThe