Datablau创始人王琤2021 DAMA中国峰会主题演讲《数据中台架构与模型管控》(下)
“十四五”规划和2035年远景目标纲要指出,“迎接数字时代,激活数据要素潜能”、“加快建设数字经济、数字社会、数字政府”。健全的数据治理体系有利于数据要素市场化配置,将在推动数字经济高质量发展中发挥重要作用。2021年10月22日,主题为“数据治理和数字化”的2021DAMA中国数据管理峰会在上海召开,为中国数据治理和数字化贡献全球智慧。
Datablau数语科技创始人王琤作为受邀专家,分享主题演讲《数据中台架构与模型管控》。
数据中台的概念在过去几年热炒,在热炒的大浪退去后,我们发现最终沉淀下来的不是各种光鲜却不知所云的新概念,而是对业务及数据的深刻理解,这些都沉淀在数据模型中,这才是企业最宝贵的数据资产。
决定数据中台项目成败的关键是中台的数据架构,尤其是DWS/DWD的设计,是否标准化、规范化,是否得到合适的管控,是否足够灵活支持各种数据分析、数据应用的场景,是否数据资产化、是否可以开放给业务部门灵活获取数据服务。
互联网早期野蛮生长的数据开发强调的是敏捷,与发展了几十年的传统企业复杂的环境完全不同。传统企业存量系统多、数据债务重,采用敏捷数据开发反而是雪上加霜,常常是临时表再拉宽表,很快就表爆炸,数据湖变成了数据沼泽。
因此,需要将SQL纯代码开发方式转变为数据模型驱动的开发模式。数据架构、数据模型统一规范化管理。
另一方面,提到架构就不得不提The Open Group的TOGAF 4A架构。这是架构领域的经典方法论。我也是The Open Group本地化专家组的成员。
4A架构即BA业务架构、DA数据架构、AA应用架构、TA技术架构。现在很多企业都成立企架办(企业架构办)专门提供企业架构的管控和服务。AA应用架构和TA技术架构企业过去几年提的比较多,如:SOA,微服务架构等。而BA业务架构和DA数据架构是很多企业欠缺,却是数字化转型中最关键的部分。
通过Datablau DDM的数据模型管控解决方案,可以将数据架构与业务架构拉通。实现数据中台架构的线上化管理,变更管理,审批管理。企业级模型、标准落标、核标,监督管理。以及后督管理:数据模型基线与生产库元数据的一致性管理。
针对模型管控解决方案大规模推广的几点经验
01
是否需要具备完备的企业数据标准才可以推广?
02
使用模型设计工具会不会降低开发效率?
03
是否所有系统都要遵从强管控?
除了数据中台模型管控机制,行业可参考的数据模型也是必不可少的。这里有个数据模型开源社区datamodeling.cn。有很多各行业的模型可以参考。您也可以在社区创建组织,拉一票人马共创一个行业模型。
我们在datamodeling.cn上面提供了一个免费社区版的建模工具,可以支持最多五个人协作建模。
社区上也会陆续推出数据建模培训,共同推进数据架构、数据模型的相关课程,推进数据人才的培养。
- 如何找到数据主人(下)---数据认责:权益跟义务 在前面中期,聊了一些据主人怎么找以及找不着怎么办的内容。在这最后一期里,我们继续接着中期的话题来介绍找着了怎么处理的问题。希望与大家一起共勉!引言数据主人或数据权益归属找着了,接下来该怎么处理数据的归属管辖权,用什么样的机制进行常态化的持续下去,采取哪种抓手方式进行,这个末期是我们今天要讨论的话题。
- 如何找到数据主人(中)——数据认责:权益跟义务 上期,我们聊了一些关于数据主人的入门性知识作为言引,主要是介绍了一个企业到底要不要找数据主人,对其中的概念关于数据主人的四大金刚方面信息做了讲解。今天,在这一期里,我们继续在接着上期的话题来展开拓展讲解数据与主人之间关系的那些事儿,再聊一聊关于数据治理过程当中的怎么找主人的事情。本期,我们主要是从企
- 如何找到数据主人(上)—— 数据认责:权益跟义务 数字化转型,是当今时代企业的机遇,也是挑战。以此进行阐述企业数字转型必经之路—数据治理。在其当中的“如何找数据主人”,是一个不可逾越、也不可回避不谈的一件事情。
- 再谈数据标准落标,论数据模型设计工具 工欲善其事必先利其器。工具是用来提高生产效率,其次才是管理属性。 一个工具顺不顺手极大影响生产效率和管理效果。
- 数语科技助力北京科技大学成功举办第一届“信息杯”数据建模大赛 4月22日,值此北京科技大学建校70周年之际,由北京数语科技有限公司支持的北京科技大学第一届“信息杯”数据建模大赛成功举办,数语科技创始人兼CEO王琤受邀出席本次大赛颁奖典礼,在这个值得纪念的日子里,与同学们共同庆祝在比赛中取得的优异成绩。