输入关键词搜索 AI 工具、分类,或直接跳转页面
Ottic是一款面向大语言模型应用开发者的产品评估测试平台,核心定位是帮助开发团队完成LLM应用的系统性评估与验证,降低产品上线前的质量风险。平台支持自动化测试用例生成、多维度性能指标统计、错误案例归因分析等核心功能,可满足开发过程中不同阶段的测试需求,目标用户为AI应用开发团队、大模型产品测试人员、AI初创企业技术团队等,适用于LLM应用开发过程中的版本迭代测试、新模型适配测试、上线前质量验证等场景。
打开Ottic官网完成账号注册,进入个人控制台后点击创建新项目,输入项目名称与LLM应用的基础信息,完成项目初始化设置。
配置LLM应用的访问接口,输入调用地址、鉴权信息与请求参数格式,平台会自动完成连通性测试,确认接口可正常调用。
选择测试类型,可选择自动生成测试用例,也可手动上传自定义测试集,设置各评估维度的评分规则与权重,确认测试配置。
触发批量测试执行,等待平台完成所有测试用例的调用与结果采集,过程中可实时查看测试进度与已完成用例的初步结果。
查看生成的完整测试报告,查看各维度评分、错误案例与归因分析,可导出报告文件,也可直接将问题同步到绑定的协作工具中。
看完教程,直接上手试试
访问 Ottic 官网