AI模型性能监控维护服务协议合同

AI模型性能监控与维护服务协议

甲方（服务购买方）： 智远科技有限公司

法定代表人/负责人： 张强

统一社会信用代码： 91310000MA1FLK896C

住所： 上海市浦东新区张江高科技园区祖冲之路123号

联系电话： 021-88886666

乙方（服务提供方）： 北京深度未来科技有限公司

法定代表人/负责人： 李明

统一社会信用代码： 91110000MA01K9876B

住所： 北京市海淀区中关村软件园1号楼

联系电话： 010-66668888

鉴于：

1. 甲方希望利用乙方在人工智能模型性能监控与维护方面的专业技术和经验，保障其AI模型的高效稳定运行；
2. 乙方同意为甲方提供AI模型性能监控与维护服务。

根据《中华人民共和国民法典》及相关法律法规的规定，双方本着平等互利、诚实信用的原则，经友好协商，达成如下协议，以资共同遵守：

第一条 服务内容

1. 模型性能监控服务：

• 1 监控指标： 乙方将对甲方指定的AI模型（具体模型信息见附件1）进行以下指标的实时监控：
  • 准确率（Accuracy）： 模型预测结果与真实结果相符的比例。具体标准为：在图像识别任务中，模型的准确率应保持在98%以上。在甲方提供的测试数据集“ImageTestSet_v1.0”上进行测试，测试频率为每小时。
  • 精度（Precision）： 模型预测为正例的样本中，真正为正例的比例。具体标准为：在图像识别任务中，模型的精度应保持在97%以上。在甲方提供的测试数据集“ImageTestSet_v1.0”上进行测试，测试频率为每小时。
  • 召回率（Recall）： 真实为正例的样本中，被模型预测为正例的比例。具体标准为：在图像识别任务中，模型的召回率应保持在97%以上。在甲方提供的测试数据集“ImageTestSet_v1.0”上进行测试，测试频率为每小时。
  • F1分数（F1-Score）： 精度和召回率的调和平均数。具体标准为：在图像识别任务中，模型的F1分数应保持在97%以上。在甲方提供的测试数据集“ImageTestSet_v1.0”上进行测试，测试频率为每小时。
  • AUC（Area Under the Curve）： ROC曲线下面积，用于衡量模型对正负样本的排序能力。具体标准为：在图像识别任务中，模型的AUC值应保持在0.98以上。在甲方提供的测试数据集“ImageTestSet_v1.0”上进行测试，测试频率为每小时。
  • 响应时间（Response Time）： 模型从接收输入到输出结果所需的时间。具体标准为：在图像识别任务中，模型的平均响应时间应不超过50毫秒，95%的请求响应时间应不超过80毫秒。
  • 吞吐量（Throughput）： 模型在单位时间内处理的请求数量。具体标准为：在图像识别任务中，模型应能支持每秒2000个请求。

资源利用率（Resource