1、XX区公共数据平台20XX年度数据运营服务项目需求说明一、项目概况为进一步提升县级公共数据治理水平,满足业务部门高质量数据供给需求,推动数据赋能经济社会发展,真正做到让数据“供得出”“流得动”“用得好”。根据XX省公共数据治理工作细则XX省公共数据条例XX省公共数据共享工作细则(第二次修订版)数据服务领域增值化改革工作方案XX省推进公共数据高质量开放工作方案等文件,结合省市工作要求,开展XX区公共数据平台20XX年度数据运营服务工作。通过平台运维、数据服务等一系列工作开展,提升公共数据可用性,持续提供高质量的数据供给,最终能够产生基于业务价值导向的标准统一的高质量数据,为本市重点工作提供良好支
2、撑、释放数据社会应用价值。二、服务内容(1)平台运维日常维护服务日常维护服务如功能维护、数据库维护、服务器监测、性能调优、问题定位解决、系统更新(包括公共数据平台系统的问题解决以及针对上级规范要求的必要升级改造工作)。为确保系统平稳正常运作,针对应用系统的使用情况提供健康、安全、专业的系统巡检,主动了解应用系统存在的问题,以便并及时解决这些问题。巡检具体内容包含了应用系统服务器、数据库、网络链路和应用系统功能四个方面,通过对服务器、数据库、网络、应用系统进行全面的检测,发现潜在问题和未来趋势,并给出相应的系统建议,进行相应的系统调整,以降低系统运行中的风险,保障系统的连续性。现场服务安排1名人
3、员现场配合完成各级各部门工作。如接口统计分析、接口巡检、编制运维工作周报或月报、总结报告等。根据运维期间的工作编制输出如运维项目工作周报或运维工作月报或运维项目总结报告。通过运维分析报告,对相关工作进行辅助指导,提升平台整体支撑能力。(2)数据服务数据治理服务根据数据使用部门反馈的数据质量问题和“一数一源一标准”要求,持续开展已归集海量数据的数据治理服务,完善数据治理工作,提升数据的一致性和准确性,以高质量数据服务各类复杂的、更高层次的、更精准的、智慧应用。同时按需配合完成上级数据质量专项提升行动,做好入园入学对接支撑等工作。a.数据常态化治理对于平台存量数据,建立通用及个性化数据清洗规则,按
4、照“一数一源一标准”要求对存量数据进行标准化治理,通过数据清洗、核对等手段发现的问题数据,通过IRS数据质量问题工单及时督促数据提供单位落实整改。数据清洗过程:建立数据质量检测机制,基于清洗任务的运行筛选出问题数据。对经过质量检测后,存在质量问题的数据表,进行问题数据检测。汇总当前存在数据质量问题的数据表,清晰呈现数据表名称、数源部门、检测字段、校验规则、字段值等数据问题信息。b.专项数据治理在专项数据治理层面,根据指示要求按需开展数据质量专项提升行动,对某类数据开展数据规范统一、数据质量维护等工作,提高专项数据的准确性、及时性和完整性。同时保障数据质量,做好入园入学对接支撑等工作。数据回流服
5、务数据回流服务:提供国家、省、市数据回流实施服务,包括协助提交数据问流申请、数据调度任务配置、数据回流入仓、调度任务运维等工作。针对回流数据质量问题,提交IRS工单报告,并协助对接省技术人员进行问题处理。数据优化服务:优化数据仓库内总量数据,保证数据按更新周期定时更新。a.数据回流服务存量数据回流:XX区通过对接数据库表结构,在本地构建XX区回流数据仓。向XX市级数据平台发出数据导出巾请,将XX区域的存量数据导出至本地前置库或区县公共数据平台内。增量数据回流:根据数据使用的业务需求,以数据交换、数据高铁两种形式分别实现增量数据的定期回流和实时回流。回流数据处理:数据回流到本地后,需要本地对应部
6、门认领,且在目录平台上进行新增数据目录的补充编目,同时对省市数据目录进行“已回流”的操作实现标记,方便下一步共享。同时对数据仓建设和数据使用过程中发现的问题,通过数据治理的闭环机制向上级平台进行反馈。b.数据优化服务优化数据仓库内总量数据,保证数据按更新周期定时更新。可通过分区、分片、增量更新等方式减少数据量,使用自动化调度工具定时触发ETL任务,结合并行处理、分布式计算提升效率,采用压缩和列式存储优化存储,利用缓存加速查询,定期归档和清理数据,并通过水平扩展和云原生架构增强扩展性。同时,监控性能、保障数据质量,持续优化系统。数据共享服务数据接口开发:配合部门个性化要求,对本地数据按需进行接口
7、封装,配合做好后续IRS资源化管理,为部门提供接口形式的数据共享服务。数据接口保障:保障已上架到IRS的数据接口调用成功率不低于90%,对接口故障问题协助各方进行问题排查、修复维护。a.数据接口开发对本地数据按需进行接口封装,将开发完毕的数据共享接口提交给网关系统、由网关系统发布至IRS进行资源化管理,为部门提供接口形式的数据共享服务。接口对接管理:对接数据使用单位,并调研接口使用需求,为数源单位接口注册、接口编目和接口管理提供支撑,包括技术咨询、上架辅助、审批通知等。接口开发编目:按需求进行共享库自定义SQL接口开发和接口编目。通过对共享库数据进行接口封装,将开发完毕的数据共享接口注册至网关
8、系统进行资源化管理,为横向部门提供接口形式的数据共享服务,实现对接口注册与使用的管理与审核。b.数据接口保障保障已上架到IRS的数据接口调用成功率不低于90%,对接口故障问题协助各方进行问题排查、修复维护。接口情况监测:定期对发布至网关系统的数据接口进行调用测试,根据测试结果,判断数据接口的健康状态,生成数据接口监测报告。接口故障修复:对产生的接口故障问题,及时协助各方进行问题排查、进行修复工作,保障数据接口稳定提供服务。数据开放服务基于XX市公共数据开放目录,增加XX区特色开放数据,明确数据项名称、数据格式、更新周期、开放属性、开放单位等。依托XX市公共数据平台开放域系统,开展数据目录开放属
9、性的动态维护与发布。a.开放目录编制基于XX市公共数据开放目录,增加XX区特色开放数据,明确数据项名称、数据格式、更新周期、开放属性、开放单位等。b.开放目录更新维护依托XX市数据开放平台实现数据开放需求,持续做好本地个性化数据的管理和监测工作,不断提升本地数据开放比例,跟踪数据开放利用效果,为数据开放应用提供高质量数据。IRS对接服务a.信创改造对接目前平台已经迁移至信创环境;后续要完善区数据平台与IRS系统、市公共数据平台对接,保障数据使用等功能可靠稳定。和XX区公共数据平台有数据交互的其他外部系统也将会进行信创改造适配,外部系统的信创改造适配也可能会影响到XX区公共数据平台,XX区公共数
10、据平台同时需能够改造自身,以适配其他外部系统的信创改造变更。和XX区公共数据平台有数据交互的其他外部系统包括但不限于XX市公共数据共享系统、XX市公共数据开放系统、XX市公共数据交换系统、XX省公共数据平台、XX省一体化数字资源管理系统(IRS),XX市数据资源管理系统以及信创桌面操作系统。b.IRS数据对接配合IRS系统做好国家数据共享、回流数据编目等工作。基于IRS规范,开展IRS“国家数据直达专区”国家数据对接工作。收集全区部门数据需求,协助指导在IRS系统“国家数据直达专区”发起数据资源申请,通过审批流程后,实现资源开通、数据共享权限,并将共享情况反馈给省IRS系统,完成流程闭环。并对
11、数据进行调用工作。数据密保服务a.风险评估根据数安之江专项行动要求,做好第三方数据风险评估。b.安全保障根据XX区公共数据存储、共享、开放等需求,实施对平台安全的服务保障,在各种威胁下保护用户数据和确保用户信息安全的能力。常见的平台安全措施如使用强密码和多因素身份验证、加密数据传输、定期更新软件和漏洞、监测和预防黑客攻击等。公共数据授权运营a.公共数据授权技术支撑保障数据供给;协助相关开发空间、省市平台的使用。协助大数据中心打通数据授权运营场景的各个流程环节;按照数据分类分级指南和数据脱敏规范,结合相关场景开展特别脱敏服务,根据数源情况、场景需求等,协同确定数据抽样脱敏规则,满足场景需求;按照
12、规则开展抽样数据脱敏服务;将脱敏数据授权导入至相关开发空间。b.公共数据授权案例总结跟踪谋划XX区开展的授权运营场景案例,对项目成效评估、创新亮点进行总结归纳和提炼,形成典型案例报告。能够确切反映本区数据要素和公共数据授权运营工作的阶段性成果、重大成效,推动XX区工作机制、成效、成果在全省区县示范突出,争先进位。c.核验服务按照项目建设文件,对项目生命周期内各文件进行内容核验,保障资料完整无误。三、服务清单序号服务项服务内容数量单位1平台运维日常维护服务日常维护服务如功能维护、数据库维护、服务器监测、性能调优、问题定位解决、系统更新(包括公共数据平台系统的问题解决以及针对上级规范要求的必要升级
13、改造工作)。1年2现场服务安排1名人员现场配合完成各级各部门工作。如接口统计分析、接口巡检、编制运维工作周报或月报、总结报告等。1年3数据服务数据治理服务按照省市数据标准,根据数据使用部门反馈的数据质量问题和“一数一源一标准”要求,持续开展已归集海量数据的数据治理服务,完善数据治理工作,提升数据的一致性和准确性,以高质量数据服务各类复杂的、更高层次的、更精准的、智慧应用。同时按需配合完成数据质量专项提升行动,做好入园入学对接支撑等工作。1年4数据回流服务数据回流服务:提供上级部门数据回流实施服务,如协助提交数据回流申请、数据调度任务配置、数据回流入仓、调度任务运维等工作。针对回流数据质量问题,
14、提交IRS工单报告,并协助对接省技术人员进行问题处理。1年5数据优化服务:优化数据仓库内总量数据,保证数据按更新周期定时更新。1年6数据共享服务数据接口开发:配合部门个性化要求,对本地数据按需进行接口封装,配合做好后续IRS资源化管理,为部门提供接口形式的数据共享1年服务。7数据接口保障:保障已上架到IRS的数据接口调用成功率不低于90%,对接口故障问题协助各方进行问题排查、修复维护。1年8数据开放服务基于XX市公共数据开放目录,增加XX区特色开放数据,明确如数据项名称、数据格式、更新周期、开放属性、开放单位等。依托XX市公共数据平台开放域系统,开展数据目录开放属性的动态维护与发布。1年9IR
15、S对接服务信创改造对接:迁移至信创环境后,完善区数据平台与IRS系统、市公共数据平台对接,保障数据使用等功能可靠稳定。1年10IRS数据对接:配合IRS系统做好国家数据共享、回流数据编目等工作。1年11数据密保服务根据数安之江专项行动要求,做好第三方数据风险评估。1年12根据XX区公共数据存储、共享、开放等需求,实施对平台安全的服务保障,在各种威胁下保护用户数据和确保用户信息安全的能力。常见的平台安全措施如使用强密码和多因素身份验证、加密数据传输、定期更新软件和漏洞、监测和预防黑客攻击等。1年13公共数据授权运营公共数据授权技术支撑:保障数据供给;协助相关开发空间、省市平台的使用。1年14公共数据授权案例总结:跟踪谋划XX区开展的授权运营场景案例,对项目成效评估、创新亮点进行总结归纳和提炼,形成典型案例报告。1年15核验服务。按照项目建设文件,对项目生命周期内各文件进行内容核验,保障资料完整无误。1年