根据业务发展需要,按照浙江宁银消费金融股份有限公司采购相关管理办法,我司拟对《 消金数据总线项目 》面向社会公开征集供应商,诚邀符合条件的供应商参与方案洽谈。
一、资质要求
1、注册资金人民币200万元(含)以上,财务状况良好;
2、公司经营正常并存续2年(含)以上;
3、企业或者其法人近两年内无行贿犯罪记录,未被列入失信执行人名单,无限制高消费、限制出入境等行为;
4、公司具备完善的组织架构和制度规范,拥有充足的技术、人员和设备资源;
5、同一法定代表人的两个及两个以上法人、母公司、全资子公司及其控股公司不得在同一次项目中参加报名;
6、参与报名的供应商能作为签约主体参与后期的商务流程;
7、设备和产品应满足《网络安全法》等法律法规要求;
8、报名供应商应符合宁银消金供应商管理相关要求;
9、报名供应商请按附件格式提供“供应商尽职调查报告”。
二、技术要求
1、具备在国有五大行、头部股份制商业银行、城商行、消金公司实施案例,技术方案具有较强的前瞻性和可落地性。
2、签约主体具备长期人员储备,能够独立开展项目工作,对项目团队进行成熟的项目管理和过程管理,并对项目工作质量负责。
3、项目团队须服从宁银消金各项管理制度。
4、公司拟参与项目人员必须通过宁银消金面试,人员面试不合格的公司不予准入。
5、如非我司人力框架供应商,组织须取得CMMI5级或TMMI5级认证。
三、报名方式及起始时间
请符合条件的供应商在 2026 年 10 月 31 日之前,登录消金采购管理系统后,通过“点击报名”方式进行报名,报名链接如下:https://cpms.nbcb.com.cn/cpms/ananymous/cms/,未注册的供应商应先行注册,注册后按要求填写相关报名材料。
四、联系方式
联系人: 田壮壮 0574-81892465 (采购部)
夏宇 0574-81852424 (科技部)
陈伟 0574-87854560 (业务部)
消金数据总线项目需求概述
(一)项目背景
目前消金数据总线主要承担行内消费金融相关系统的离线数据同步、离线入仓及实时数据同步能力,为下游对风控模型、经营分析、监管报送、客户画像、渠道分析等场景提供统一的数据支撑。
现有数据同步体系主要分为离线 INFA 数据同步及实时 OGG 数据同步两部分。其中离线同步链路主要通过 Informatica 对各业务系统数据进行抽取、转换、加载,实现多源异构数据库数据入仓及库表间批量同步;实时同步链路主要通过 OGG 捕获源端数据库日志,实现数据秒级同步至 Kafka 消息队列,供下游实时消费计算。
随着消金业务规模扩大,现需对消金数据总线同步能力进行持续优化与功能迭代,提升数据同步稳定性、任务执行效率及生产运维能力,满足亿级数据量场景下的数据同步及实时处理需求。
(二)技术栈要求
1.离线同步技术要求
核心工具:
· Informatica PowerCenter
· Shell 脚本
· Linux
数据同步能力:
· 支持 Oracle、MySQL、OB、GDB 等主流数据库数据抽取
· 支持全量、增量同步模式
· 支持库对库同步及 Hive ODS 层入仓同步
· 支持大批量数据并行抽取及批处理
任务调度:
· 通过 JMP 自研调度平台统一配置及调度任务
· 支持任务依赖、失败重跑、定时调度等能力
· 支持 Workflow 自动调起及状态监控
数据处理:
· 支持字段映射转换
· 支持数据清洗、格式转换、空值处理
· 支持增量字段识别及同步逻辑配置
· 支持批量加载及事务控制
2.实时同步技术要求
核心工具:
· Oracle GoldenGate(OGG)
· Kafka
同步能力:
· 支持数据库 CDC 实时同步
· 支持源端 redo 日志捕获
· 支持秒级数据同步至 Kafka
· 支持高并发、高吞吐实时同步场景
3.数据库要求
支持数据库类型:
· Oracle
· MySQL
· OceanBase
· GBase
· Hive
数据库设计要求:
· 根据同步场景合理设计表结构及索引
· 优化大批量数据写入性能
· 控制长事务及锁等待风险
· 避免低效 SQL 及全表扫描
Impala 入仓要求:
· 数据统一落地 ODS 层
· 支持分区表设计
· 支持按日期分区增量加载
· 支持历史数据归档清理
(三)核心需求详情
1.离线 ETL 数据同步开发
新增离线数据同步需求开发,支持多源异构数据库数据抽取、转换及加载。
同步场景包括:
· 业务系统至 Hive 数仓数据入仓
· OB/GDB 等异构数据库间数据同步
开发内容包括:
· INFA Mapping 开发
· Workflow 配置
· Session 参数配置
· Source/Target Mapping 配置
· 增量同步逻辑开发
· Shell 脚本开发
· JMP 调度任务配置
同步过程中需支持:
· 全量初始化同步
· 增量数据抽取
· 大表并行抽取
· 批量提交控制
2.实时 OGG 数据同步开发
新增实时数据同步链路开发,实现源系统数据实时同步至 Kafka。
同步内容包括:
· OGG Extract 配置
· OGG Pump 配置
· OGG Replicat 配置
· Kafka Topic 配置
· 实时同步链路联调
同步过程中需支持:
· 秒级数据同步
· DML 操作捕获
· 高并发写入
· 同步延迟控制
· 异常重传机制
3.JMP 调度任务配置
所有离线同步任务需统一纳入 JMP 调度平台管理。
调度配置包括:
· 任务执行时间配置
· 上下游依赖配置
· 失败重跑机制
· 并发控制
· 执行状态监控
需确保:
· 调度链路稳定
· 任务失败可追溯
· 支持批量任务管理
· 支持生产环境自动调度
4.生产运维及日志优化
为提升生产问题排查效率,需完善同步日志及运行状态记录能力。
包括:
· INFA Session 日志记录
· Workflow 执行日志
· OGG 运行日志
· Shell 执行日志
· Kafka 同步状态日志
需支持:
· 错误信息快速定位
· 同步耗时统计
· 同步数据量统计
· 异常任务分析
(四)性能优化
1.离线同步性能优化
数据抽取优化:
· 大表并行抽取
· 增量同步替代全量同步
· Source Qualifier SQL 优化
· 减少跨库关联查询
INFA 优化:
· 合理配置 Commit Interval
· 优化 Buffer Size
· 减少不必要 Transformation
· 优化 Lookup 缓存策略
数据库优化:
· 建立合理索引
· 避免全表扫描
· 控制大事务
· 优化批量写入效率
2.实时同步性能优化
OGG 优化:
· 优化 Trail 文件配置
· 控制同步延迟
· 提升 Kafka 写入吞吐量
· 优化并行 Replicat 配置
Kafka 优化:
· 合理配置 Partition
· 优化 Producer 参数
· 提升消息消费效率
· 控制消息堆积风险
(五)页面流程测试
1.功能测试
验证离线及实时同步功能正确性,包括:
· 全量同步
· 增量同步
· 实时同步
· 失败重跑
· 调度触发
2.性能测试
验证大数据量场景下系统稳定性:
· 亿级数据同步性能测试
· 高并发实时同步测试
· Kafka 吞吐测试
· 大批量入仓测试
3.生产联调测试
验证:
· JMP 调度链路
· Kafka 消费链路
· OGG 实时同步链路
· Hive 入仓结果
· Oracle/MySQL 同步结果
确保生产环境同步链路稳定可靠。
附件:
宁银消金信息科技服务提供商尽职调查报告(模板)
一、基本信息
1.1 服务提供商基本信息
服务提供商全称 |
|
成立日期 |
| 法人代表 |
|
公司类型 |
| 注册资本&币种 |
|
统一社会信用代码 |
|
公司地址 |
|
联系人 |
| 联系人电话 |
|
公司主营业务 |
|
1.2 监管评价
(是否出现在监管机构的黑名单中-中国执行信息公开网查看是否被列入“失信执行人”)
(最近二年在政府或金融同业合作过程中是否受到处罚-信用中国查看“重大税收违法失信主体”)
(是否存在未决诉讼-中国执行信息公开网查看“综合查询被执行人”)
1.3 关联公司或附属机构信息
(关联公司或附属机构是否存在经营危机,该危机是否危及该服务提供商的正常经营)
1.4 主要客户清单列表
(主要客户群体)
二、服务提供商持续经营能力
2.1 财务情况
(近三年经审计的财务报表)
三、服务提供商内部控制和管理能力
3.1 服务提供商内控评估报告
(评估报告内容如覆盖以下3.2-3.6内容,则将评估报告内容对应填写至各个部分)
3.2 服务提供商的组织结构
(内部控制部门,如是否建立了内部的使用工具的安全测试部门、内控部门、审计部门)
3.3 IT制度体系建设
(是否对其公司及项目的安全管理及流程管理建立了相应的制度)
(项目过程中的项目管理(PMO)体系,包括例会、沟通渠道等)
(服务质量控制方法)
3.4 培训体系建设
(是否对其员工定期开展技术技能以及安全防范相关的培训,提供培训计划或培训材料)
3.5 服务提供商人员离职率
(了解公司技术人员的离职率)
3.6 IT风险管控
(包括对公司本身的IT风险管控及所承接外包项目的IT风险管控情况)
四、服务提供商信息技术能力
4.1 服务能力和支持技术
(服务提供商的技术能力资质证明,专业认证等)
(描述使用的工作方法、应用软件、技术文档、评估模型、评估工具等使用情况、知识产权等)
4.2 服务经验与市场评价
(服务提供商主要的服务行业、主营业务、服务客户)
(类似的服务项目经验及项目合同证明材料)
五、服务提供商的网络和信息安全保障能力
(该项评估内容用于非驻场信息科技外包)
(描述内容可包括网络与信息安全管理体系建设情况、网络与信息安全技术防护体系建设情况、安全事件响应和恢复能力、实践经验等)