浙江宁银消费金融股份有限公司数据总线项目供应商召集公告

根据业务发展需要，按照X采购相关管理办法，我司拟对《消金数据总线项目》面向社会公开征集供应商，诚邀符合条件的供应商参与方案洽谈。一、资质要求1、X资金人民币XX（含）以上，财务状况良好；2、公司经营正常并存续X年（含）以上；3、企业或者其法人近两年内无行贿犯罪记录，未被列入失信执行人名单，无限制高消费、限制出入境等行为；4、公司具备完善的组织架构和制度规范，拥有充足的技术、人员和设备资源；5、同一法定代表人X、全资子公司及其控股公司不得在同一次项目中参加X；6、参与X的供应商能作为签约主体参X流程；7、设X络安全法》等法律法规要求；8、X供应商应符合宁银消金供应商管理相关要求；9、X供应商请按附件格式提供“供应商尽职调查报告”。二、技术要求1、具备在国有五大XX实施案例，技术方案具有较强的前瞻性和可落地性。2、签约主体具备长期人员储备，能够独立开展项目工作，对项目团队进行成熟的项目管理和过程管理，并对项目工作质量负责。3、项目团队须服从宁银消金各项管理制度。4、公司拟参与项目人员必须通过宁银消X不予准入。5、如非我司人力框架供应商，组织须取得CMMI5级或TMMI5级认证。三、X方式及起始时间请符合条件的供应商在X年X月X日之前,X后，通过“XX”方式进行X，X链接如下：https:X.cncpmsananymouscms，未X的供应商应先行X，X后按要求填写相关X材料。四、联系方式联系人：XX（采购部）夏宇X-X（科技部）陈伟X-X（业务部）消金数据总线项目需求概述（一）项目背景目前消金数据总线主要承担X的离线数据同步、离线入仓及实时数据同步能力，为下游对风控模型、经营X析、监管报送、客户画像、XX析等场景提供统一的数据支撑。现有数据同步体系主要X为离线INFA数据同步及实时OGG数据同步两部X。其中离线X主要通过InformaX数据进行抽取、转换、加载，实现多源异构数据库数据入仓及库表间批量同步；实时X主要通过OGG捕获源端数据库日志，实现数据秒级同步至Kafka消息队列，供下游实时消费计算。随着消金业务规模扩大，现需对消金数据总线同步能力进行持续优化与功能迭代，提升数据同步稳定性、任务执行效率及生产运维能力，满足X级数据量场景下的数据同步及实时处理需求。（二）技术栈要求1.离线同步技术要求核心工具：·InformaticaPowerCenter·Shell脚本·Linux数据同步能力：·支持Oracle、MySQL、OB、GDB等主流数据库数据抽取·支持全量、增量同步模式·支持库对库同步及HiveODS层入仓同步·支持大批量数据并行抽取及批处理任务调度：·通X统一配置及调度任务·支持任务依赖、失败重跑、定时调度等能力·支持Workflow自动调起及状态监控数据处理：·支持字段映射转换·支持数据清洗、格式转换、空值处理·支持增量字段识别及同步逻辑配置·支持批量加载及事务控制2.实时同步技术要求核心工具：·OracleGoldenGate（OGG）·Kafka同步能力：·支持数据库CDC实时同步·支持源端redo日志捕获·支持秒级数据同步至Kafka·支持高并发、高吞吐实时同步场景3.数据库要求支持数据库类型：·Oracle·MySQL·OceanBase·GBase·Hive数据库设计要求：·根据同步场景合理设计表结构及索引·优化大批量数据写入性能·控制长事务及锁等待风险·避免低效SQL及全表扫描Impala入仓要求：·数据统一落地ODS层·支持XX表设计·支持按日期XX增量加载·支持历史数据归档清理（三）核心需求详情1.离线ETL数据同步开发新增离线数据同步需求开发，支持多源异构数据库数据抽取、转换及加载。同步X至Hive数仓数据入仓·OBGDB等异构数据库间数据同步开发内容包括：·INFAMapping开发·Workflow配置·Session参数配置·SourceTargetMapping配置·增量同步逻辑开发·Shell脚本开发·JMP调度任务配置同步过程中需支持：·全量初始化同步·增量数据抽取·大表并行抽取·批量提交控制2.实时OGG数据同步开发新增实时数据同步X数据实时同步至Kafka。同步内容包括：·OGGExtract配置·OGGPump配置·OGGReplicat配置·KafkaTopic配置·实时X联调同步过程中需支持：·秒级数据同步·DML操作捕获·高并发写入·同步延迟控制·异常重传机制3.JMP调度任务配置所有离线同步任务需统X管理。调度配置包括：·任务执行时间配置·上下游依赖配置·失败重跑机制·并发控制·执行状态监控需确保：·X稳定·任务失败可追溯·支持批量任务管理·支持生产环境自动调度4.生产运维及日志优化为提升生产问题排查效率，需完善同步日志及运行状态记录能力。包括：·INFASession日志记录·Workflow执行日志·OGG运行日志·Shell执行日志·Kafka同步状态日志需支持：·错误信息快速定位·同步耗时统计·同步数据量统计·异常任务X析（四）性能优化1.离线同步性能优化数据抽取优化：·大表并行抽取·增量同步替代全量同步·SourceQualifierSQL优化·减少跨库关联查询INFA优化：·合理配置CommitInterval·优化BufferSize·减少不必要Transformation·优化Lookup缓存策略数据库优化：·建立合理索引·避免全表扫描·控制大事务·优化批量写入效率2.实时同步性能优化OGG优化：·优化Trail文件配置·控制同步延迟·提升Kafka写入吞吐量·优化并行Replicat配置Kafka优化：·合理配置Partition·优化Producer参数·提升消息消费效率·控制消息堆积风险（五）页面流程测试1.功能测试验证离线及实时同步功能正确性，包括：·全量同步·增量同步·实时同步·失败重跑·调度触发2.性能测试验X稳定性：·X级数据同步性能测试·高并发实时同步测试·Kafka吞吐测试·大批量入仓测试3.生产联调测试验证：·JMPX·KafkaX·OGG实时X·Hive入仓结果·OracleMySQL同步结果确保生产环境X稳定可靠。附件：宁银消金信息科技服务提供商尽职调查报告（模板）一、基本信息1.1服务提供商基本信息服务提X类型XX地址联系人联系人电话公司主营业务1.2监管评价（是否出现在监管机构的黑名单中-X查看是否被列入“失X或金融同业合作过程中是否受到处罚-信用中国查看“重大税收违法失信主体”）（是否存在未决诉讼-X查看“综合查询被执行人”）1.3关联X或附属机构是否存在经营危机，该危机是否危及该服务提供商的正常经营）1.4主要客户清单列表（主要客户群体）二、服务提供商持续经营能力2.1财务情况（近三年经审计的财务报表）三、服务提供商内部控制和管理能力3.1服务提供商内控评估报告（评估报告内容如覆盖以下3.2-3.6内容，则将评估报告内容对应填写至各个部X）3.2服务提供商的组织结构内部控制部门，如是否建立了内部的使用工具的安全测试部门、内控部门、审计部门3.3IX及项目的安全管理及流程管理建立了相应的制度）（项目过程中的项目管理（PMO）体系，包括例会、X等）（服务质量控制方法）3.4培训体系建设（是否对其员工定期开展技术技能以及安全防范相关的培训，提供培训计划或培训材料）3.5服X技术人员的离职率）3.6IT风险管控（包括对公司本身的IT风险管控及所承接外包项目的IT风险管控情况）四、服务提供商信息技术能力4.1服务能力和支持技术（服务提供商的技术能力资质证明，专业认证等）（描述使用的工作方法、应用X、技术文档、评估模型、评估工具等使用情况、知识产权等）4.2服务X场评价（服务提供商主要的服务行业、主营业务、服务客户）（类似的服务项目经验及项目合同证明材料）X络和信息安全保障能力（该项评估内容用于非驻场信息科技外包）X络与信息安全管X络与信息安全技术防护体系建设情况、安全事件响应和恢复能力、实践经验等）