前提条件
- 需要注册成为UCloud用户,并完成实名认证。
- 目前UModelVerse处于邀请测试阶段,如需体验功能,请联系客户经理或技术支持申请开通功能权限。
仅需四步,即可完成行业模型上线:数据导入——>模型微调 ——> 发布模型 ——>服务部署
-
点击产品「对象存储 US3」—— 创建存储空间——文件管理,将需要用于训练的数据或模型存放至US3中。具体操作可见US3操作文档
-
创建US3令牌:UCloud文档中心
?> 注意:令牌权限需包含下载、文件列表、上传、删除;且目前仅支持华北二存储空间。
-
点击产品「模型服务平台 UModelVerse」—— 功能菜单「数据集管理」——创建数据集
-
选择已导入US3的训练数据,用于微调训练时使用
通过模型微调,可将模型与训练数据集结合,通过参数的设置优化模型在行业、业务方面的专业性,是训练行业模型的关键步骤。
!> 目前仅支持SFT训练。
-
点击产品「模型服务平台 UModelVerse」—— 功能菜单「模型微调」——创建任务
-
根据步骤条提示,完成对应参数配置
-
确认后任务将自动下发并调用训练算力进行模型训练。待状态变为「已完成」后,表示训练任务已结束,可查看模型详情。在训练过程中,也可以随时查看监控图,观察训练过程,若有异常可随时停止训练任务。
对训练完符合预期的模型可进行发布,发布成功后进入「模型管理」界面,便于管理各个模型版本,并选择特定的模型进行后续评估。
- 点击产品「模型服务平台 UModelVerse」—— 功能菜单「模型评估」—— 创建评估任务
- 评估模式:默认当前模型评估方式为「基线评估」。
- 选择数据集:选择「预置数据集」或「自定义数据集」(数据集管理中已发布的数据集)。
- 评估模型:选择「基线模型」(必选)和「对比模型」。
- 停用词表:选择「预置停用词表」或上传「自定义停用词表」(自定义数据集适用)。若选择「预置数据集」,则跳过这一步。
- 存储设置:通过授权令牌,选择存储空间,目前仅支持华北二区域。
创建评估任务后将自动进行评估。待状态变为「已完成」后,表示评估任务已结束,可查看评估结果。当前支持的评估结果分为 2 种:
-
预置数据集评估报告:支持查看评估报告。指标打分(STEM、Social Sciences、Humanities、Other、Average)和结果可视化。
-
自定义数据集评估报告:支持查看评估报告和评估详情。指标打分(ROUGE-1、ROUGE-2、ROUGE-L、BLEU)、可视化结果、和评估详情。
创建完成的服务将自动进入部署状态,部署成功后将生成API Key,可用于服务调用
也可对部署成功的服务进行在线访问,通过对话进行服务验证