4D生成

GenXD

gen-x-d.github.io

GenXD是一个专注于3D与4D场景生成的开源研究框架，核心面向计算机视觉领域的研究者、开发人员及相关方向学生，旨在解决当前4D生成领域数据稀缺、运动与相机参数耦合的行业问题。核心功能包含专业4D数据策划流程，可从普通视频中提取相机姿态与物体运动强度参数；自研CamVid-30K大规模现实世界4D场景数据集，覆盖多类真实场景样本；多视图-时间模块，可实现相机与物体运动参数的分离学习，兼容3D与4D两类数据训练。目标用户覆盖高校计算机视觉实验室研究员、3D内容开发工程师、元宇宙场景搭建人员、AI生成算法开发者、数字孪生项目从业者、图形学相关专业学生等。使用场景包括学术研究中4D生成算法的基准测试、元宇宙项目中动态场景的批量生成、数字孪生项目的真实场景复刻、3D内容创作中的多视图一致素材生成等。

4D-fy

sherwinbahmani.github.io

4D-fy是面向科研人员与内容创作者的文本驱动4D内容生成技术展示平台，基于混合分数蒸馏采样技术，可将自然语言描述转化为包含空间结构与动态变化的高保真4D场景。平台核心功能包括文本输入生成动态4D辐射场、多视角预览生成效果、参数可调的渲染输出，服务于计算机图形学研究者、动画内容制作者、元宇宙场景搭建人员等群体，可用于学术研究验证、动画分镜快速构思、元宇宙动态场景原型制作等场景，用户无需手动建模即可通过文字描述生成具备合理3D结构与自然运动效果的4D内容。