(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211113109.7 (22)申请日 2022.09.14 (71)申请人 中国信息通信研究院 地址 100191 北京市海淀区花园北路52号 (72)发明人 袁博　白玉真　童锦瑞　王思源　 姜春宇　魏凯　马智华　 (74)专利代理 机构 北京康盛知识产权代理有限 公司 11331 专利代理师 张宇峰 (51)Int.Cl. G06F 11/36(2006.01) G06N 20/00(2019.01) (54)发明名称 一种联邦学习平台的功能测试方法及装置 (57)摘要 本申请涉及计算机测试技术领域， 公开一种 联邦学习平台的功能测试方法及装置， 其中， 所 述功能测试方法包括： 对待测对象平台进行调度 管理能力测试， 生成调度管 理能力测试项的测试 结果； 对待测对象平台进行数据处理能力测试， 生成数据处理能力测试项的测试结果； 对待测对 象平台进行算法实现测试， 生 成算法实现测试项 的测试结果； 对待测对象平台进行模 型效果及性 能测试， 生成模型效果及性能测试项的测试结 果； 对待测对象平台进行安全性、 稳定性及可扩 展性测试， 生成安全性、 稳定性及可扩展性测试 项的测试结果； 根据每项测试的测试结果， 对所 述待测对象平台进行整体功能评估， 生成最终的 功能测试报告。 权利要求书2页 说明书11页 附图7页 CN 115543782 A 2022.12.30 CN 115543782 A 1.一种联邦学习平台的功能测试 方法， 其特 征在于， 包括： 对待测对象平台进行调度管理能力测试， 根据所述待测对象平台在对应测试项中的状 态和响应结果， 生成调度管理能力测试项的测试 结果； 对待测对象平台进行数据处理能力测试， 根据所述待测对象平台在对应测试项中的状 态和响应结果， 生成数据处 理能力测试项的测试 结果； 对待测对象平台进行算法实现测试， 根据 所述待测对象平台在对应测试项中的状态和 响应结果， 生成算法实现测试项的测试 结果； 对待测对象平台进行模型效果及性 能测试， 根据 所述待测对象平台在对应测试项中的 状态和响应结果， 生成模型效果及性能测试项的测试 结果； 对待测对象平台进行安全性、 稳定性及可扩展性测试， 根据所述待测对象平台在对应 测试项中的状态和响应结果， 生成安全性、 稳定性及可扩展性测试项的测试 结果； 根据每项测试的测试结果， 对所述待测对象平台进行整体功能评估， 生成最终的功能 测试报告。 2.根据权利要求1所述的功能测试方法， 其特征在于， 所述对待测对象平台进行调度 管 理能力测试， 包括： 对所述待测对象平台进行用户账号管理测试、 用户信息管理测试、 用户权限管理测试、 节点管理测试、 任务管 理功能测试、 任务 终止测试、 多任务计算测试、 系统资源调配测试、 任 务优先级调度测试、 模型 管理功能测试、 模型 备份测试和模型 版本管理功能测试。 3.根据权利要求1所述的功能测试方法， 其特征在于， 所述对待测对象平台进行数据处 理能力测试， 包括： 对所述待测对象平台进行数据预先导入能力测试、 数据即使输入能力测试、 数据接口 功能测试、 授权管理功能测试、 数据发布功能测试、 数据基础分析能力测试和数据对齐测 试。 4.根据权利要求1所述的功能测试方法， 其特征在于， 所述对待测对象平台进行算法实 现测试， 包括： 对所述待测对象平台进行特征预处理测试、 特征相关性分析测试、 特征选择测试、 分类 算法测试、 多分类算法测试、 回归算法测试、 无监督学习算法测试、 深度学习算法测试和优 化器选择测试。 5.根据权利要求1所述的功能测试方法， 其特征在于， 所述对待测对象平台进行模型效 果及性能测试， 包括： 对所述待测对象平台进行模型评价指标测试、 基础性能测试、 模型预测功能测试和贡 献评估测试。 6.根据权利要求1所述的功能测试方法， 其特征在于， 所述对待测对象平台进行安全 性、 稳定性及可扩展性测试， 包括： 对所述待测对象平台进行算法安全性测试、 通信信道安全性测试、 计算结果安全性测 试、 流程隐私性测试、 身份认证测试、 网络故障稳定性测试、 节点 故障稳定性测试、 日志功能 测试、 数据规范性保护测试、 算法热升级测试和多平台部署测试。 7.一种联邦学习平台的功能测试装置， 其特 征在于， 包括： 第一能力测试模块， 被配置为对待测对象平台进行调度管理能力测试， 根据所述待测权　利　要　求　书 1/2 页 2 CN 115543782 A 2对象平台在对应测试项中的状态和响应结果， 生成调度管理能力测试项的测试 结果； 第二能力测试模块， 被配置为对待测对象平台进行数据处理能力测试， 根据所述待测 对象平台在对应测试项中的状态和响应结果， 生成数据处 理能力测试项的测试 结果； 第三能力测试模块， 被配置为对待测对象平台进行算法实现测试， 根据所述待测对象 平台在对应测试项中的状态和响应结果， 生成算法实现测试项的测试 结果； 第四能力测试模块， 被配置为对待测对象平台进行模型效果及性能测试， 根据所述待 测对象平台在对应测试项中的状态和响应结果， 生成模型效果及性能测试项的测试 结果； 第五能力测试模块， 被配置为对待测对象平台进行安全性、 稳定性及可扩展性测试， 根 据所述待测对 象平台在对应测试项中的状态和响应结果， 生成安全性、 稳定性及可扩展性 测试项的测试 结果； 测试结果评估模块， 被配置为根据每项测试的测试结果， 对所述待测对象平台进行整 体功能评估， 生成最终的功能测试报告。 8.一种计算设备， 包括处理器和存储有程序指令的存储器， 其特征在于， 所述处理器被 配置为在运行所述程序指 令时， 执行如权利要求 1至6任一项 所述的联邦学习平台的功能测 试方法。 9.一种存储介质， 存储有程序指令， 其特征在于， 所述程序指令在运行时， 执行如权利 要求1至6任一项所述的联邦学习平台的功能测试 方法。权　利　要　求　书 2/2 页 3 CN 115543782 A 3