根据业务发展需要,按照****采购相关管理办法,我司拟对《 消金数据总线项目 》面向社会公开征集供应商,诚邀符合条件的供应商参与方案洽谈。
一、资质要求
1、注册资金人民币200万元(含)以上,财务状况良好;
2、公司经营正常并存续2年(含)以上;
3、企业或者其法人近两年内无行贿犯罪记录,未被列入失信执行人名单,无限制高消费、限制出入境等行为;
4、公司具备完善的组织架构和制度规范,拥有充足的技术、人员和设备**;
5、同一法定代表人的两个及两个以上法人、母公司、****公司****公司不得在同一次项目中参加报名;
6、参与报名的供应商能作为签约主体参与后期的商务流程;
7、设备和产品应满足《网络安全法》等法律法规要求;
8、报名供应商应符合宁银消金供应商管理相关要求;
9、报名供应商请按附件格式提供“供应商尽职调查报告”。
二、技术要求
1、具备在国有五大行、****银行、城商行、消金公司实施案例,技术方案具有较强的前瞻性和可落地性。
2、签约主体具备长期人员储备,能够独立开展项目工作,对项目团队进行成熟的项目管理和过程管理,并对项目工作质量负责。
3、项目团队须服从宁银消金各项管理制度。
4、公司拟参与项目人员必须通过宁银消金面试,****公司不予准入。
5、如非我司人力框架供应商,组织须取得CMMI5级或TMMI5级认证。
三、报名方式及起始时间
请符合条件的供应商在 2026 年 5 月 24 日之前,登录消金采购管理系统后,通过“点击报名”方式进行报名,报名链接如下:https://cpms.****.cn/cpms/ananymous/cms/,未注册的供应商应先行注册,注册后按要求填写相关报名材料。
四、联系方式
联系人: 田壮壮 0574-****2465 (采购部)
夏宇 0574-****2424 (科技部)
陈伟 0574-****4560 (业务部)
消金数据总线项目需求概述(一)项目背景目前消金数据总线主要承担行内消费金融相关系统的离线数据同步、离线入仓及实时数据同步能力,为下游对风控模型、经营分析、监管报送、客户画像、渠道分析等场景提供统一的数据支撑。
现有数据同步体系主要分为离线 INFA 数据同步及实时 OGG 数据同步两部分。其中离线同步链路主要通过 Informatica 对各业务系统数据进行抽取、转换、加载,实现多源异构数据库数据入仓及库表间批量同步;实时同步链路主要通过 OGG 捕获源端数据库日志,实现数据秒级同步至 Kafka 消息队列,供下游实时消费计算。
随着消金业务规模扩大,现需对消金数据总线同步能力进行持续优化与功能迭代,提升数据同步稳定性、任务执行效率及生产运维能力,满足亿级数据量场景下的数据同步及实时处理需求。
(二)技术栈要求1.离线同步技术要求核心工具:
﹒ Informatica PowerCenter
﹒ Shell 脚本
﹒ Linux
数据同步能力:
﹒ 支持 Oracle、MySQL、OB、GDB 等主流数据库数据抽取
﹒ 支持全量、增量同步模式
﹒ 支持库对库同步及 Hive ODS 层入仓同步
﹒ 支持大批量数据并行抽取及批处理
任务调度:
﹒ 通过 JMP 自研调度平台统一配置及调度任务
﹒ 支持任务依赖、失败重跑、定时调度等能力
﹒ 支持 Workflow 自动调起及状态监控
数据处理:
﹒ 支持字段映射转换
﹒ 支持数据清洗、格式转换、空值处理
﹒ 支持增量字段识别及同步逻辑配置
﹒ 支持批量加载及事务控制
2.实时同步技术要求核心工具:
﹒ Oracle GoldenGate(OGG)
﹒ Kafka
同步能力:
﹒ 支持数据库 CDC 实时同步
﹒ 支持源端 redo 日志捕获
﹒ 支持秒级数据同步至 Kafka
﹒ 支持高并发、高吞吐实时同步场景
3.数据库要求支持数据库类型:
﹒ Oracle
﹒ MySQL
﹒ OceanBase
﹒ GBase
﹒ Hive
数据库设计要求:
﹒ 根据同步场景合理设计表结构及索引
﹒ 优化大批量数据写入性能
﹒ 控制长事务及锁等待风险
﹒ 避免低效 SQL 及全表扫描
Impala 入仓要求:
﹒ 数据统一落地 ODS 层
﹒ 支持分区表设计
﹒ 支持按日期分区增量加载
﹒ 支持历史数据归档清理
(三)核心需求详情1.离线 ETL 数据同步开发新增离线数据同步需求开发,支持多源异构数据库数据抽取、转换及加载。
同步场景包括:
﹒ 业务系统至 Hive 数仓数据入仓
﹒ OB/GDB 等异构数据库间数据同步
开发内容包括:
﹒ INFA Mapping 开发
﹒ Workflow 配置
﹒ Session 参数配置
﹒ Source/Target Mapping 配置
﹒ 增量同步逻辑开发
﹒ Shell 脚本开发
﹒ JMP 调度任务配置
同步过程中需支持:
﹒ 全量初始化同步
﹒ 增量数据抽取
﹒ 大表并行抽取
﹒ 批量提交控制
2.实时 OGG 数据同步开发新增实时数据同步链路开发,实现源系统数据实时同步至 Kafka。
同步内容包括:
﹒ OGG Extract 配置
﹒ OGG Pump 配置
﹒ OGG Replicat 配置
﹒ Kafka Topic 配置
﹒ 实时同步链路联调
同步过程中需支持:
﹒ 秒级数据同步
﹒ DML 操作捕获
﹒ 高并发写入
﹒ 同步延迟控制
﹒ 异常重传机制
3.JMP 调度任务配置所有离线同步任务需统一纳入 JMP 调度平台管理。
调度配置包括:
﹒ 任务执行时间配置
﹒ 上下游依赖配置
﹒ 失败重跑机制
﹒ 并发控制
﹒ 执行状态监控
需确保:
﹒ 调度链路稳定
﹒ 任务失败可追溯
﹒ 支持批量任务管理
﹒ 支持生产环境自动调度
4.生产运维及日志优化为提升生产问题排查效率,需完善同步日志及运行状态记录能力。
包括:
﹒ INFA Session 日志记录
﹒ Workflow 执行日志
﹒ OGG 运行日志
﹒ Shell 执行日志
﹒ Kafka 同步状态日志
需支持:
﹒ 错误信息快速定位
﹒ 同步耗时统计
﹒ 同步数据量统计
﹒ 异常任务分析
(四)性能优化1.离线同步性能优化数据抽取优化:
﹒ 大表并行抽取
﹒ 增量同步替代全量同步
﹒ Source Qualifier SQL 优化
﹒ 减少跨库关联查询
INFA 优化:
﹒ 合理配置 Commit Interval
﹒ 优化 Buffer Size
﹒ 减少不必要 Transformation
﹒ 优化 Lookup 缓存策略
数据库优化:
﹒ 建立合理索引
﹒ 避免全表扫描
﹒ 控制大事务
﹒ 优化批量写入效率
2.实时同步性能优化OGG 优化:
﹒ 优化 Trail 文件配置
﹒ 控制同步延迟
﹒ 提升 Kafka 写入吞吐量
﹒ 优化并行 Replicat 配置
Kafka 优化:
﹒ 合理配置 Partition
﹒ 优化 Producer 参数
﹒ 提升消息消费效率
﹒ 控制消息堆积风险
(五)页面流程测试1.功能测试验证离线及实时同步功能正确性,包括:
﹒ 全量同步
﹒ 增量同步
﹒ 实时同步
﹒ 失败重跑
﹒ 调度触发
2.性能测试验证大数据量场景下系统稳定性:
﹒ 亿级数据同步性能测试
﹒ 高并发实时同步测试
﹒ Kafka 吞吐测试
﹒ 大批量入仓测试
3.生产联调测试验证:
﹒ JMP 调度链路
﹒ Kafka 消费链路
﹒ OGG 实时同步链路
﹒ Hive 入仓结果
﹒ Oracle/MySQL 同步结果
确保生产环境同步链路稳定可靠。
附件:
宁银消金信息科技服务提供商尽职调查报告(模板)
一、基本信息
1.1 服务提供商基本信息
| 服务提供商全称 |
|||
| 成立日期 |
法人代表 |
||
| 公司类型 |
注册资本 币种 |
||
| 统一社会信用代码 |
|||
| 公司地址 |
|||
| 联系人 |
联系人电话 |
||
| 公司主营业务 |
|||
1.2 监管评价
(是否出现在监管机构的黑名单中-中国执行信息公开网查看是否被列入“失信执行人”)
****政府或金融同业**过程中是否受到处罚-信用中国查看“重大税收违法失信主体”)
(是否存在未决诉讼-中国执行信息公开网查看“综合查询被执行人”)
1.3 关联公司或附属机构信息
****公司或附属机构是否存在经营危机,该危机是否危及该服务提供商的正常经营)
1.4 主要客户清单列表
(主要客户群体)
二、服务提供商持续经营能力
2.1 财务情况
(近三年经审计的财务报表)
三、服务提供商内部控制和管理能力
3.1 服务提供商内控评估报告
(评估报告内容如覆盖以下3.2-3.6内容,则将评估报告内容对应填写至各个部分)
3.2 服务提供商的组织结构
(内部控制部门,如是否建立了内部的使用工具的安全测试部门、内控部门、审计部门)
3.3 IT制度体系建设
****公司及项目的安全管理及流程管理建立了相应的制度)
(项目过程中的项目管理(PMO)体系,包括例会、沟通渠道等)
(服务质量控制方法)
3.4 培训体系建设
(是否对其员工定期开展技术技能以及安全防范相关的培训,提供培训计划或培训材料)
3.5 服务提供商人员离职率
****公司技术人员的离职率)
3.6 IT风险管控
****公司本身的IT风险管控及所承接外包项目的IT风险管控情况)
四、服务提供商信息技术能力
4.1 服务能力和支持技术
(服务提供商的技术能力资质证明,专业认证等)
(描述使用的工作方法、应用软件、技术文档、评估模型、评估工具等使用情况、知识产权等)
4.2 服务经验与市场评价
(服务提供商主要的服务行业、主营业务、服务客户)
(类似的服务项目经验及项目合同证明材料)
五、服务提供商的网络和信息安全保障能力
(该项评估内容用于非驻场信息科技外包)
(描述内容可包括网络与信息安全管理体系建设情况、网络与信息安全技术防护体系建设情况、安全事件响应和恢复能力、实践经验等)