声纳智能模型性能评测辅助系统

一、项目名称

某智能模型性能评测辅助系统软件。

二、经费概算

项目建设经费预算为22.5万元。

三、主要用途、任务内容

本项目以智能模型评测试验为需求牵引，针对样本数据处理、智能算法引接支持、评测结果显示等核心指标，通过构建相关软件系统，实现样本数据集管理、支撑算法评测、可视化展示等功能，支撑智能模型算法样本训练和测试，为智能模型评价和算法优化提供工具支撑，提高试验综合质效。

评测系统主要组成包括主流程控制分系统、数据管理分系统、算法模型管理分系统、测评任务管理分系统、可视化分系统。通过建立统一化的数据上传和处理机制，利用数据编辑工具实现数据微调需求，实现对样本数据的全过程管理，功能包括自动或自定义生成标准文件名、数据切割、拼接、信息查询等，同时应具备评估过程管理和数据可视化展示功能，为用户提供全面直观易懂的数据和结果展示界面。

四、主要功能性能指标

（一）总体功能

（1）具备支持开展智能模型训练、测试和微调功能。

（2）具备与外部数据源和外部算法模型数据交互与互联功能。

（3）支持样本数据管理、算法模型性能评估评价辅助和评估结果的可视化展示功能。

（二）分系统（模块）功能

1.主流程控制分系统（模块）

（1）流程控制管理功能

能够对性能评估分系统和可视化分系统进行初始化，向两个分系统发送训练和测试流程控制指令，实现训练和测试流程的管控。

（2）测试信息配置管理功能

能够对测试集的测试顺序、答题时间、评分比例、正确率/漏报率比例和数据误差值等测试信息进行设置，配置的测试信息保存到数据库中，能够提供初始化参数设置模板，对不同试验任务的参数配置信息进行版本控制。

（3）算法状态监视功能

支持对待测试算法进行连接状态监测，在进行多个算法同时测试时，实时显示每个算法的连接状态；具备对异常状态进行弹窗提示功能。

2.数据管理分系统（模块）

（1）样本数据接入

支持多种格式和数据源的数据上传与接入。样本数据进行导入、分类、查询、筛选、删除等处理。支撑建立统一的数据库，并能够对数据集（包括训练集、验证集和测试集）进行版本化管理。支持数据按样本分类进行管理。

（2）数据处理

集成常见的数据预处理工具，包括数据清洗、数据切割、数据微调与合并、数据增强、数据集拆分，并通过图形化界面预览操作结果。根据命名规范可为新生成的数据分配指定标识，确保数据的一致性和可追溯性。支持对数据集的标注信息进行查看、编辑和验证。

（3）数据检索与浏览

能够实现基于元数据（含标签、来源、创建时间）的数据集检索和可视化浏览功能。

3.算法模型管理分系统（模块）

（1）系统初始化功能

能够接收主流程控制分系统的初始化指令，从数据库中获取配置好的测试信息。

（2）模型接入功能

支持多种主流的模型格式接入，包括深度学习、传统机器学习和可执行文件。

4.评测任务管理分系统（模块）

（1）任务配置功能

根据选择的数据类型和数据源创建算法评估任务，允许用户通过选取配置项的方式灵活配置评测任务。配置项包括：

①选择待评测的模型及其版本；

②选择使用的数据集及其版本；

③选择需要计算的性能指标项；

对任务分配分值比例，系统可调用灵活设定各项指标的得分占比并支持自定义添加指标来增加系统的可扩展性，通过智能模型输出结果与标准结果进行比对，最终得出综合得分和各项指标得分，能够根据评分指标对智能模型计算的结果进行核对和综合评价。

（2）结果分析功能

提供混淆矩阵、PR曲线、ROC曲线等可视化分析手段，支持在同一图表中对比多个模型在不同数据集或同一数据集上的各项性能指标，支持查看模型在具体某一个样本上的输出结果，辅助进行错误分析和模型调试。

（3）结果显示功能

算法模型评测处理结果支持实时显示和历史显示两种模式。实时显示模式下，能够动态显示算法提交的实时处理结果和对应得分，同时根据得分情况显示算法分数排名；历史显示模式下，能够查看算法提交的所有处理结果和最终分数排名。

（4）历史数据存储和导出功能

存储所有评测任务的详细结果，包括原始输入、各项指标得分和系统**消耗日志等。

5.可视化分系统（模块）

系统可视化界面应具备良好的交互性，支持筛选、缩放、钻取等功能，根据需求自定义关注的范围，通过时间索引、任务索引等索引方式进行算法评估结果关联查询，并通过折线图、散点图、柱状图等形式，进行评估结果的可视化展示。

（三）主要战术技术指标

（1）支持样本数据批量导入，支持单次导入不小于1000条。支持多种数据格式的信号计算，包括阵元域、跟踪波束域、全波束域。

（2）系统支持最多10个算法同时在线进行算法测试评估。

（3）支持实时计算结果的显示和排名，界面显示结果数据不少于10个；

（4）历史数据查询时间不大于1秒，详细信息显示类型包括正确作答和错误作答两种；可根据总分、正确性、时效性、定位能力分别排序；可显示指定算法和测试数据的提交信息及正确答案。

（5）信息综合显示能力，显示数据源信息、模型状态和模型处理结果等内容。

（6）系统部署环境支持Windows7及以上版本、**V10及以上版本操作系统。

（四）其他要求

1.设计要求

软件具有开放性，软件要求功能齐全、使用方便、可移植性强、人机交互界面**。

2.软件预留接口、拓展性和易用性要求

软件预留部分分系统接口，用于后续系统的功能升级。

（1）预留数据管理分系统其他类型数据处理功能接口

主要用于处理和关联其他结构化和非结构化数据文件，主要包括今后可能引入的在目标探测过程中表征传感器设定参数、环境和目标特征等数据。

（2）预留算法模型管理分系统其他类型模型引入功能接口

该接口主要用于后续智能辅助决策等模型的训练和测试，并进行结果综合分析。

五、周期及售后服务

周期为6个月。项目验收后，提供不少于1年的免费服务与技术支持。。

六、资质要求

1.****事业单位登记管理局颁发的《事业单位法人证书》****管理局颁发的《企业法人营业执照》，具备独立法人资格和独立承担民事责任的能力。

2.具有武器装备科研生产单位二级（含）以上保密资质。

3.通过装备质量体系认证。

4.财务资金状况良好。

5.具有履行合同所必需的设备和专业技术能力。

6.不接受联合体单位承制。

七、对接方式

1.需进行网上报名，已网上成功报名单位于2026年11月5日前将资质材料派员送至我部进行现场对接。

2.报送地址：**省**市。

3.联系方式：张先生 130****5486。

八、资质材料要求

由报名单位提供：

1.法定代表人授权委托证明书、被授权人身份证明；

2.现行有效的企业营业执照／事业单位法人证书等资质证明文件、质量管理体系认证证书复印件；

3.保密资质证书复印件。

4.开户银行提供的资信证明及存款证明、近3年审计报告;事业单位或军内单位可提供经单位盖章的内部财务报表。

资质材料复印件为A4纸张，复印件均需加盖单位公章，装订成册，一式贰份。有关资质证书过期正在办理的，需提供认证部门出具的证明材料，以及报名方认为有必要提供的其它资质证明文件。

九、其他要求

资质审查情况作为确定项目采购方式及采购入围单位的支撑，参与对接且符合资格要求是采购入围单位的必要条件，请有意向单位按要求的内容提供材料，我方保留进一步筛选的权利。若资质审查中需由报名方补充相关材料的，允许报名单位于审查当日2200前提供补充证明资料（传真或扫描电子版）。