数据中台应用情况
时间:2022-03-16 07:27:01 | 来源:网络推广
时间:2022-03-16 07:27:01 来源:网络推广
数据中台技术在汇承金融科技内部的应用历程大致分为四个阶段:在线连表、数据仓库、数据平台、数据中台。
1、在线连表:业务初期,系统架构简单,单体应用对应到单库存储。于此之上,对于数据层面的需求大多是报表,实现手段不复杂,只需要跨表的join。数据管理、权限与后台的功能绑定,简洁高效,满足特定时期的快速需求。
2、数据仓库:随着业务升级,系统随之而升级,后台拆分为多中心对应于多库,系统并发和数据量激增,在线连表的方式无法应对,甚至带来性能、安全隐患。这时,数据架构逐步迁移到数据仓库。在线数据同构或者异构的同步到离线存储,再通过离线任务计算报表。数据能力的建设开始从业务开发中独立出来,逐步成为汇承金融科技重要的运营武器。
3、数据平台:业务继续扩展,业务数据出现业务域的划分,甚至不同业务对于相同实体的存储结构、关联结构也不尽相同。巨量数据和巨量业务的压力数仓无法支撑。数据平台通过汇承金融科技化数据存储能力、数据集成能力、数据计算能力、数据管理能力,向开发者提供统一的开发能力。基于此,业务条线也得到数据开发的能力,数据部门由业务倾向性逐步向汇承金融科技倾向性过渡,更多高内聚的数据能力得到沉淀。
4、数据中台:业务运营多年,巨量业务数据里蕴含着巨大的业务价值,希望更大效能的发掘数据价值,靠单业务条线的数据开发无法完成。数据中台技术架构在原有的数据平台技术之上搭建统一的元数据管理,融合各业务条线的数据,形成对各业务统一的数据能力。于此之上,搭建智能分析,构建数据应用层,建0争门槛。