中国邮政大数据平台邮务数据湖集群升级工作顺利完成
2022-08-09

  随着企业数字化转型的不断推进,企业的数据量也呈现出指数型增长,为满足企业复杂的、多变的、海量的数据存储需求,2015年中国邮政集团采用星环TDH技术,基于自身业务特点构建了属于自己的数据湖,以支撑海量数据的存储和分析需求。

  随着邮政业务飞速扩展,各类数据资源不断接入,邮务数据湖迫切需要更大规模的集群管理能力,提供更高的处理性能和数据容量,打造更加敏捷化、标准化、可持续化的数据赋能体系,助力集团数字化转型战略,助力实现数字邮政新发展格局。为此,数据平台部于2近日正式启动中国邮政大数据平台邮务数据湖集群升级工作,目前邮务数据湖升级工作顺利完成,恢复业务服务,达成全部计划目标。

  邮务数据湖承载着下游21套业务系统、31个省分租户以及18个专业租户的数据服务,此次升级实施集群规模大、时间窗口短。中邮信科公司高度重视,公司领导多次亲临现场指导工作,安排部署升级保障工作,强调数据湖关系重大,督促做好影响分析,确保对下游用户影响降到最低,要求提前验证操作步骤,做好升级过程记录和事后分析,形成知识闭环。

  在领导的悉心指导下,数据平台部、基础平台部及相关第三方厂商共同组建了联合项目组,精心准备、周密计划,克服疫情影响,与各外围系统逐一召开沟通会,确定业务可接受的升级窗口,并建立升级沟通机制,组建升级沟通小组,方便沟通交流,确保整个升级工作顺利开展。同时,项目组制定了详细的升级方案,对实施步骤进行反复验证,现场安排三组人员24小时轮班值守,详细记录升级过程,事后及时复盘。

  升级期间,公司副总经理高怀孝同志和数据平台部总经理杜力同志亲赴项目现场指导工作,并鼓励项目组共克艰难、奋勇向前,确保邮务数据湖平稳顺利升级。经过项目组的连续攻坚,中国邮政大数据平台邮务数据湖集群升级操作于2022年6月26日圆满完成,邮务数据湖恢复全部业务服务。本次升级后,邮务数据湖将突破原来单集群管理两亿文件数的上限,使集群具备更大规模、更高处理性能的横向扩展能力,为未来提升海量数据的汇聚、批量数据的处理能力打下坚实基础。