多模态理解

Drofy

drofy.net

Drofy是一款以AI技术为核心的对话与逻辑处理引擎，主要面向有智能对话搭建、逻辑推理分析、自动回复生成需求的用户群体。核心功能包括多模态对话内容理解、逻辑关系自动梳理、自定义回复规则配置，可支持开发者接入产品搭建智能对话模块，也可帮助内容创作者、运营人员完成文本逻辑校验、常见咨询自动回复配置等工作，适用于智能客服系统搭建、学术论文逻辑梳理、社群咨询批量回复、AI对话应用开发等多种场景。

DreamLLM

dreamllm.github.io

DreamLLM是专注于多模态大语言模型研发的开源学习框架，核心定位是打破传统多模态模型的技术瓶颈，实现理解与创作能力的协同提升。核心功能包括原生多模态空间采样生成、无外部特征依赖的语义理解、跨模态联合分布建模三类，支持研究人员快速复现多模态生成实验，也可供AI开发人员搭建跨模态内容生成系统。目标用户覆盖AI领域研究学者、大模型开发工程师、高校计算机相关专业师生等群体，适用于多模态模型技术研发、跨模态内容生成工具开发、大模型相关学术实验验证等场景。