Diffusion as Shader(简称DaS)是香港科技大学等高校研究团队开发的3D感知视频生成控制模型工具站,核心定位是为视频创作与3D内容生产领域提供基于扩散模型的多任务控制解决方案。核心功能包括支持网格到视频生成,可将3D网格素材转化为写实或风格化的连续视频内容;支持相机路径自定义控制,生成符合指定镜头运动逻辑的动态视频;支持运动迁移与对象属性编辑,可在保留原有3D空间逻辑的前提下修改对象外观、动作参数。目标用户覆盖CG从业者、影视动画制作人员、VR内容开发者、AI生成技术研究人员、高校计算机相关专业学生等,适用于影视片段预演、VR场景内容生成、3D动画效果测试、AI视频生成学术研究等多个场景。
- 运营状态
- 正常运营
- 地址
- igl-hkust.github.io
- 定价模式
- Diffusion as Shader属
- 是否开源
- 闭源
- 适合人群
- 影视动画制作人员、CG内容创作者、VR内容开发者、AI生成技术研究人员
- 收录时间
- 2026/6/14
- 访问量
- 0 次
编辑点评
这是由香港科技大学等高校研究团队推出的学术类AI视频生成工具站点,和普通的文本生成视频工具不同,它的核心特点是将3D感知能力融入扩散模型的生成过程,解决了过往AI生成视频普遍存在的空间逻辑混乱、时序一致性差的问题。其统一架构支持多种视频控制任务的设计,让用户无需在多个工具之间切换,即可完成从3D素材到成片的多个环节处理,少量数据即可微调的特性也降低了个性化场景的适配成本。目前站点上已经公开了多个不同场景的生成效果案例,涵盖写实、二次元、赛博朋克等多种风格,也提供了相关的技术论文供有需求的用户查阅,对于需要将3D素材转化为动态视频的从业者,以及研究AI视频生成技术的人员来说,这个站点的内容和工具能力都有较高的参考与使用价值。
核心功能
使用指南
- 1
进入Diffusion as Shader官网首页,浏览页面中的功能说明与效果展示案例,确认工具的能力范围符合自身的使用需求,提前准备好符合要求的3D跟踪素材或相关参数文件。
- 2
在功能选择区域选择对应要使用的任务类型,可选类型包括网格转视频、相机控制生成、运动迁移、对象编辑等,点击对应选项进入功能操作页面。
- 3
按照页面提示上传对应的输入素材,如3D网格文件、参考视频片段、自定义相机参数文件等,确认素材格式符合平台要求后完成上传,等待系统解析素材信息。
- 4
根据自身需求调整生成参数,可选择生成视频的风格、分辨率、时长、生成步数等,也可设置是否开启时序一致性优化、空间逻辑校验等额外选项,确认参数无误后提交生成请求。
- 5
等待系统完成生成处理,处理时长根据素材大小与参数设置有所不同,生成完成后可在线预览效果,确认符合预期后可下载生成的视频文件,若效果不佳可调整参数重新提交生成。
优势与不足
优点4 项
"具备3D感知生成能力,生成视频的空间逻辑与时序一致性表现较好"
"统一架构支持多种视频控制任务,覆盖网格转视频、相机控制等多类需求"
"支持少量数据微调适配个性化场景,无需大规模训练数据集即可实现定制化生成"
"站点公开完整的技术论文与效果案例,可供技术研究人员查阅参考"
不足4 项
"暂未提供在线交互操作界面,普通用户需要部署本地环境才可使用功能"
"对输入素材有要求,需要提供带3D跟踪信息的素材才可完成生成,普通2D素材无法直接使用"
"生成速度受硬件配置影响较大,普通消费级显卡生成高分辨率视频耗时较长"
"当前相关教程较少,新手用户上手需要具备一定的3D建模与AI模型部署基础"
定价说明
Diffusion as Shader属于学术开源项目,所有核心功能代码完全免费对外开放,用户可直接从站点获取相关代码资源自行部署使用,无功能使用时长、生成次数方面的限制,也不存在付费解锁的隐藏功能。目前项目暂未推出商业化的付费版本,也没有相关的付费增值服务,用户如果需要定制化适配服务可联系研究团队沟通合作。建议个人研究、非商业用途的用户直接使用开源版本即可,有商业落地需求的企业可与开发团队沟通官方合作支持方案。
价格和授权政策可能变化,请以官网最新信息为准
适合人群与场景
- 影视动画制作人员
影视片段预演
- CG内容创作者
3D动画效果测试
- VR内容开发者
VR场景动态内容生成
- AI生成技术研究人员
视频生成模型研发
- 高校计算机专业学生
扩散模型相关课题研究
- 游戏内容开发者
游戏过场动画快速制作
- 广告创意设计师
3D风格化广告视频制作
- 数字孪生从业者
数字场景动态可视化生成
常见问题
深度了解
Diffusion as Shader(简称DaS)是AI视频生成领域的学术研究成果工具站,由香港科技大学等多所高校的研究团队联合开发,专注于解决传统AI视频生成中空间逻辑混乱、时序一致性不足的问题。站点不仅提供完整的模型开源代码,还公开了大量不同场景的生成效果案例与相关技术论文,方便用户了解工具的实际能力与技术原理。
平台支持的功能覆盖多个视频生成控制场景,用户可以上传3D网格文件生成对应风格的连续视频,也可以自定义相机参数生成符合指定镜头运动逻辑的视频,还可以实现运动迁移、对象属性编辑等操作,所有功能都基于3D感知扩散模型架构,生成的内容会严格遵循3D空间逻辑,有效减少帧间闪烁、物体错位等问题。对于有个性化需求的用户,平台支持少量数据微调,仅需十余组素材即可让模型适配特定风格或场景,降低了定制化生成的门槛。
当前Diffusion as Shader已经被应用于影视预演、VR场景内容制作、3D动画生成等多个领域,相关技术研究成果也在行业学术会议中公开,对于从事CG内容创作、AI视频生成研究、VR内容开发的用户来说,该站点的工具与相关资源都具备较高的使用与参考价值。
Ready to try
准备好体验 Diffusion as Shader 了吗?
点击下方按钮在新标签页打开官网,开始探索它的全部功能。
相关工具
Hailuo3
Hailuo3是Minimax推出的AI视频生成工具,核心定位是帮助用户通过文本或图像素材快速生成高清视频内容,降低视频制作的技术门槛与时间成本。平台支持文生视频、图生视频两大核心生成模式,还提供视频时长调整、风格定制等配套编辑功能,面向内容创作者、品牌运营人员、中小团队、市场营销人员等群体,可应用于短视频内容制作、品牌宣传片产出、营销物料设计、教学演示视频制作等多个场景,满足不同用户的批量化视频生产需求。

通义万相AI视频生成
免费通义万相AI视频生成是阿里云推出的AI视频创作工具,核心定位为依托大模型技术实现文本、图像到视频的智能转换,降低视频内容生产的技术门槛。核心功能包括文生视频、图生视频、视频风格化,支持用户通过简单操作生成不同主题的动态视频内容。目标用户覆盖内容创作者、营销从业者、教育工作者、设计人员等群体,适用于短视频内容制作、品牌广告素材产出、教学演示视频制作、创意视觉作品设计等多种场景,帮助用户在不需要复杂视频剪辑技能的情况下,完成符合需求的视频内容产出。
Kling 3.0
Kling 3.0是快手推出的AI视频生成工具,核心定位是降低视频创作的技术门槛,为不同创作需求的用户提供智能生成解决方案。核心功能包括文本生成视频、图像生成视频、运动轨迹自定义控制,支持多分辨率视频输出。目标用户覆盖内容创作者、短视频运营者、影视制作人员、设计从业者等群体,可用于短视频内容生产、创意样片快速制作、营销物料生成、动画demo演示等多个场景,帮助用户减少实拍成本,缩短内容制作周期。
Hailuo 03
Hailuo 03是Minimax推出的AI视频生成工具,依托自研的Hailuo 3.0模型,支持用户通过文本或图片输入快速生成视频内容。该工具核心功能包含文生视频、图生视频、视频时长自定义调节,面向内容创作者、营销从业者、教育工作者等群体,可满足短视频制作、产品宣传物料生成、教学演示视频产出等多场景使用需求,降低视频创作的技术门槛与时间成本。
Vidu 国际版
免费Vidu是国内专注于AI视频生成的服务平台,核心基于自研视频生成模型打造,可支持长时长、高一致性、高动态效果的视频产出。平台核心功能包括文生视频、图生视频、视频风格转化,目标用户覆盖内容创作者、动画制作者、广告设计人员、影视从业者、自媒体运营者等群体,可满足广告片制作、短视频内容产出、概念动态演示、动画片段创作、影视分镜可视化等多种场景的视频生产需求,帮助用户降低视频制作的人力与时间成本。

可灵
免费Kling是可灵AI推出的AI视频生成工具,核心定位为面向专业创作者的AI导演工具,支持原生4K分辨率视频生成,可实现连贯多镜头叙事、物理精准的动态效果。核心功能包括多镜头叙事生成、物理动态模拟、4K原生渲染,目标用户覆盖影视创作者、广告制作人员、内容运营者等群体,可应用于影视样片快速制作、广告创意可视化、短视频内容创作、教学演示视频生成等场景,帮助用户降低视频制作的时间与人力成本,提升内容产出效率。
Seedance 2.0
Seedance 2.0是字节跳动推出的AI视频生成平台,核心定位为基于文本描述生成高质量专业级视频内容。该平台支持生成1080p分辨率视频,具备先进的运动合成技术与多镜头一致性控制能力,可满足创作者生成连贯专业视频内容的需求。目标用户包含视频内容创作者、影视制作人员、创意广告设计师、自媒体内容运营人员等,适用场景包括创意短视频生成、分镜头脚本可视化、广告宣传短片制作、概念视频原型开发等多种内容生产场景。

MiniMax
免费MiniMax是搭载海螺AI(Hailuo)技术底座的AI视频生成平台,核心支持文生视频、图生视频两大核心创作模式,同时支持视频时长与风格自定义,可为不同需求的视频创作者、内容运营人员、设计从业者提供创作支持,可覆盖短视频制作、创意demo产出、商业宣传素材生成等多类场景使用,助力用户减少视频制作环节的人力投入,提升内容产出效率。
你是 Diffusion as Shader 的开发者或团队吗?
认领后可编辑工具信息、获取真实点击数据,并在页面上展示官方认证徽章。
访问第三方工具时,请注意账号、隐私与支付安全

用户评论
0· 0 条