应用优化&更新

在完成对应用的评测后,我们可以依据评测报告的结果,深入剖析应用存在的具体问题。针对非模型效果类的问题,我们可以在应用层面实施有针对性的调试措施,以确保应用效果的精准性。而对于模型效果类的问题,用户可以通过对测试数据进行标注,进而创建模型优化任务。利用这些已标注的数据对模型进行训练,并将训练完成的模型替换到应用中,再次测试应用效果,以达到预期的目标效果。通常而言,训练数据量越大,模型的训练效果往往会更为出色。

人工标注异常数据及分类,以下场景效果问题可使用模型优化:

  • 意图识别效果不好
  • Function Call抽槽效果不好
  • 性能优化

测试数据标注

工作流应用支持标注大模型节点、决策节点、变量提取器节点

Bot应用(应用中不包含工具、工作流、知识库)支持一键标注,反之不支持一键标注

创建模型优化任务

  1. 登录星辰大模型平台;
  2. 在左侧导航栏中选择应用评测,并在页面顶部选择任务列表
  3. 点击模型优化任务tab,切换至模型优化任务列表页,点击新建模型优化任务按钮,进入新建页面,填写基本信息即可。

更新应用

  1. 当优化任务状态为已优化时,可更新应用

  2. 点击去更新或者到应用侧去更新模型即可

powered by 飞云 all right reserved,powered by Gitbook该文章修订时间: 2025-04-08 13:23:31

results matching ""

    No results matching ""