基于知识工程和生成式AI的XX智能设计方法系统

计算机科学技术研究服务

本项目拟采购《基于知识工程和生成式A的XX智能设计方法系统》一套，需满足以下主要指标：1.支持并行构建索引，提升处理大规模数据集的效率。2.集群包含一主两备三套数据库管理系统，组成高可用数据库集群，附带三套数据库集群管理软件。集群在确保RPO=0的前提下，可以实现RTO≤10s。3.支持大于等于15000维度的稠密向量、支持大于等于2000维度的索引创建和查询。4.在2 路国产处理器平台上，在不低于100张千万行表的数据规模下，持续10分钟的不低于1000并发操作，数据库的批量数据插入的事务处理能力可达120万次/秒、单值插入数据的的事务处理能力可达10万次/秒、删除数据的事务处理能力可达60万次/秒、单值数据查询的事务处理能力可达100万次/秒。5.支持IVF、HNSW、Diskann等至少三种向量索引类型，标量索引如布尔、字符、数字标量索引；支持空间数据GIST索引；支持向标联合索引；向量索引支持更新自动维护。6.支持强一致性时，在128维1000w向量数据集下99%以上召回率的单次ann查询响应时间 lt;10ms。7.支持多种数据源归集管理能力，支持标准NFSv3.OBS协议，支持多模态数据格式，包括PDF/docx/doc/txt/html/markdown/md/XML/json；json/jsonl；jpg/jpeg/png/bmp。8.支持XX知识的文本抽取、文档过滤、异常清洗、数据去重、特殊词替换共5类30+算子；支持图片过滤、图片去重、图片修复、图片降噪、图片标准化共5类10+算子；9.数据标注方面，支持QA对自动生成，支持图片标注与审核；支持泛文本类型数据质量自动、人工评估；支持QA对类型数据质量自动、人工评估；10.模型管理方面，支持模型导入、查询、修改、删除的能力，，兼容主流的大语言模型、embedding模型，包括：Qwen-14B、Qwen-72B、Qwen2-72B、ChatGLM3-6B、LLaMA3 8B、LLaMA3 70B、bge-zh-large-v1.5，bge-reranker-large，Qwen2.5 全系列，Qwen2.5-VL多模态系列，DeepSeek-R1/V3 671B 满血量化版；11.模型训练方面，支持模型微调训练，提供全参和LoRA两种模型微调方式，支持基于 MindIE 和 MindSpeed-LLM 提供 NPU 芯片平台的推理和训练的加速能力；支持TP、PP等训练策略配置，支持训练超参数自定义配置。12.模型服务方面，支持单****服务部署，提供统一网关提供多模型的的统一访问入口，支持 SK 认证；****服务部署和多推理实例负载均衡；支持MoE模型大****服务部署；支持多****服务部署，支持LLM推理服务。