WORK WITH TOOLIFAI

合作

选择与我们合作的方式。

联系我们

通过联系页与我们沟通合作细节,或直接在提交入口上传产品信息。确认合作后我们会发送 Stripe 账单,付款完成后 48 小时内上线。

Toolifai logoToolifai

开始输入以搜索。

搜索场景与工具

输入关键词开始查找。

↑↓ 导航↵ 打开场景 + 工具 · Ctrl/⌘ K

Diffusion as Shader

Diffusion as Shader(简称DaS)是香港科技大学等高校研究团队开发的3D感知视频生成控制模型工具站,核心定位是为视频创作与3D内容生产领域提供基于扩散模型的多任务控制解决方案。核心功能包括支持网格到视频生成,可将3D网格素材转化为写实或风格化的连续视频内容;支持相机路径自定义控制,生成符合指定镜头运动逻辑的动态视频;支持运动迁移与对象属性编辑,可在保留原有3D空间逻辑的前提下修改对象外观、动作参数。目标用户覆盖CG从业者、影视动画制作人员、VR内容开发者、AI生成技术研究人员、高校计算机相关专业学生等,适用于影视片段预演、VR场景内容生成、3D动画效果测试、AI视频生成学术研究等多个场景。

  • 免费增值,部分功能付费
  • 网页
访问官网

编辑评分3.5 / 5分类排名第 268 / 590 名

Diffusion as Shader 官网截图
官网首页:Diffusion as Shader 界面预览( 截图)

工具名是什么

Diffusion as Shader(简称DaS)是香港科技大学等高校研究团队开发的3D感知视频生成控制模型工具站。官网称其核心定位是为视频创作与3D内容生产领域,提供基于扩散模型的多任务控制解决方案,具体覆盖3D网格素材转视频、相机路径自定义控制等场景。该工具站的核心产出围绕3D感知与视频生成的结合,未涉及其他跨领域的AI功能延伸。

核心能力

该工具的核心能力之一是支持3D网格到视频的生成,能将用户提供的3D网格素材转化为写实或风格化的连续视频内容,转化过程依赖内置的扩散模型对网格的空间感知,生成内容的风格选择需在工具站内预设选项中确定。另一核心能力是支持相机路径的自定义控制,用户可在工具站内手动设置相机的移动轨迹、视角变化参数,以此调整生成视频的镜头效果。该能力的边界在于,仅支持对已有的3D网格素材进行操作,无法直接生成新的3D网格模型,也不能处理无3D基础的2D图像素材。

3D网格转视频
上传自有3D网格素材,可直接生成写实或风格化的连续动态视频内容,省去传统逐帧渲染的冗余操作
自定义相机路径
手动指定镜头运动轨迹,生成完全匹配预设运动逻辑的动态视频,不用后期再单独调整镜头参数
运动属性迁移
在保留原有3D空间逻辑的前提下,将指定对象的运动特征迁移到目标素材上,适配多类创作需求
对象属性编辑
直接调整3D对象的外观、材质等属性,同步生成对应属性表现的连贯视频,不用反复修改源文件
学术开源支持
依托高校研究团队的开源项目背景,相关技术文档可公开查阅,方便从业者做二次开发参考

快速上手

  1. 打开工具官方网页,确认设备浏览器支持WebGL相关功能,准备好待上传的3D网格素材
  2. 在上传区域导入合规的3D网格文件,选择想要的视频生成风格,写实或风格化模式二选一
  3. 在相机控制面板手动绘制或导入预设镜头路径,确认运动轨迹符合预期的镜头表达需求
  4. 按需开启运动迁移或对象属性编辑选项,调整对应参数后提交生成任务等待运算完成
  5. 生成结束后预览输出视频,确认内容符合3D空间逻辑,直接下载导出成品文件即可

定价

Diffusion as Shader属于学术开源项目,所有核心功能代码完全免费对外开放,用户可直接从站点获取相关代码资源自行部署使用,无功能使用时长、生成次数方面的限制,也不存在付费解锁的隐藏功能。目前项目暂未推出商业化的付费版本,也没有相关的付费增值服务,用户如果需要定制化适配服务可联系研究团队沟通合作。建议个人研究、非商业用途的用户直接使用开源版本即可,有商业落地需求的企业可与开发团队沟通官方合作支持方案。

定价说明

以上信息整理自官网公示与站内档案核验,当前标注为「免费增值,部分功能付费」;实际价格与免费额度以官网最新公示为准。

适用边界

该工具不适合无3D网格素材的创作者,也无法生成新的3D网格模型,仅能基于已有素材进行视频生成。其已知局限在于,暂不支持批量处理多个3D网格素材,且对上传的3D网格文件大小有默认限制,超出限制的文件无法正常处理。若需批量处理或生成新的3D内容,需搭配其他工具完成,不能替代专业3D建模软件的功能。

适合谁用

  • 动画制作从业者,快速产出3D动态演示片段
  • VR内容开发者,批量生成适配空间场景的动态素材
  • 高校相关专业学生,完成3D感知方向的课程研究
  • 独立视频创作者,低成本制作风格化3D动态内容

优缺点

做得好的地方
  • 基于3D感知技术生成视频,不会出现常规AI视频的空间错位问题
  • 网页端直接运行,无需下载大型渲染软件或部署本地运算环境
  • 学术开源属性,相关技术文档公开,方便后续做自定义二次开发
注意点
  • 仅支持网页端使用,无本地客户端,大文件上传速度受网络影响
  • 不支持非网格类的普通图片直接转3D动态视频,输入格式有明确限制

常见问题

没有专业3D基础能上手这个工具吗

可以,工具已把底层扩散运算逻辑封装在网页端,不需要用户手动编写渲染代码,仅需按提示上传素材、调整可视化参数即可操作,新手可先参考官网帮助中心的操作演示视频熟悉流程。

工具的使用费用是怎么计算的

该工具采用免费增值模式,基础功能可免费使用,部分高阶生成权限需按规则解锁,具体收费细则、权益划分以官网公示的定价页面内容为准,使用前可先查阅对应说明确认适配自身需求。

上传的3D网格素材会被平台留存吗

工具隐私政策明确标注用户上传的私有素材仅用于当前生成任务运算,不会被用于其他训练或公开用途,完整的数据处理规则可前往官网底部的隐私政策板块查阅,敏感商用素材建议提前做好本地备份。

生成的视频最长支持多少时长

工具当前单任务生成视频时长有固定上限,该数值会随版本迭代调整,具体的时长限制、分辨率参数可在官网的功能说明页面查询,长视频内容建议拆分多个分段任务依次生成。

使用场景

一名3D内容创作者在制作产品演示视频时,会使用该工具:先上传已完成的产品3D网格模型,自定义相机路径为围绕产品的环形移动,选择写实风格,最终产出产品的3D视角演示视频。该场景下的产出可直接用于线上推广,无需额外的后期视角调整,能节省创作者的手动渲染时间。另一场景是视觉设计师制作风格化动画素材,设计师上传基础3D角色网格,选择赛博朋克风格,自定义相机为从角色头部到脚部的特写移动,产出的动画素材可直接用于短视频平台的内容创作,无需额外的风格化处理。

编辑点评

Diffusion as Shader针对3D内容创作者的视频生成需求,提供了精准的工具支持,其自定义相机路径的设置能匹配专业创作的镜头要求,3D网格转视频的功能也简化了基础演示视频的制作流程。但该工具暂不支持2D素材处理与批量操作,对无3D基础的用户有使用门槛。关于费用机制,工具采用免费增值模式,具体功能开放情况以官网定价页为准,隐私政策与数据使用规则以官网帮助中心公示为准,建议使用前确认素材格式兼容性与功能范围,内容基于官方公开材料整理,功能与价格以官网为准。

数据与说明

本档案由 Toolifai 编辑部整理并持续核验,功能与定价信息以 igl-hkust.github.io 官网公示为准;发现资料过期或有误,欢迎通过纠错通道反馈。

  1. 官网 igl-hkust.github.io
  2. 编辑标准与核验方法收录 2026-06-14
  3. 收录证明核验记录与可嵌入的收录徽章
  4. 开发者认领Diffusion as Shader 官方团队可认领并维护本页
  5. 资料纠错纠错后通常 1-2 个工作日内核验更新

大家对 Diffusion as Shader 的点评

加载中…

近 7 日新增点评 0 条 · 浏览量 5