开篇词 | 数据中台,是陷阱?还是金钥匙?
该思维导图由 AI 生成,仅供参考
- 深入了解
- 翻译
- 解释
- 总结
本文是一篇关于数据中台建设的实践经验分享。作者是网易大数据平台负责人,具有丰富的实践经验。他指出数据中台建设需要系统性工程,包括组织架构、支撑技术和流程规范,并提到了一些企业在数据中台建设中遇到的问题。作者承诺通过该专栏,结合网易数据中台的实践经验,给读者带来大量一线的案例,从原理到实现,最后到实践,让读者深入了解数据中台如何在企业落地。他还承诺提供可落地执行的数据中台建设方法和经过实践的数据中台支撑技术体系。通过这个专栏,读者将获得一线互联网公司数据中台的实践经验、大量实践案例讲解如何躲过数据中台建设的坑、可落地执行的数据中台建设方法和经过实践的数据中台支撑技术体系。数据中台对企业数字化转型至关重要,本文将为读者提供宝贵的实践经验和技术支持,帮助他们更好地理解和应用数据中台建设。
2020-03-3054人觉得很赞给文章提建议
《数据中台实战课》,新⼈⾸单¥59
全部留言(30)
- 最新
- 精选
- 德布罗意不管是数据中台还是业务中台,归根结底都是业务驱动第一性原理,中台技术是方法工具,做任何系统之前,我们要深刻反思业务的来源、现状,未来,我们业务的核心价值观是什么?希望在郭老师的课程里除了学到数据中台技术,也能学到对数据业务的方法论😁
作者回复: 数据业务最重要的是要驱动业务的发展,能够辅助业务去进行经营决策。这里面会有几个阶段,首先是要把数据展示出来,让人能够看到数据,然后是要实现基于数据,能够让人形成一些action,在你的这个数据产品上完成一些决策和闭环,这就涉及到与业务系统的打通和联动。第三个是数据业务化,我们可以打造一些数据产品,通过数据产品可以作为一种业务。 我觉得大部分公司可能现在要做的只是第一步,现在很多数据都还没展示出来,也没多少人看。数据意识很重要,要培养,但是培养的前提是数据的效率、质量和成本要跟得上,所以数据中台是前提。试想一下,你的数据天天违反常识,有多少人愿意看? 我觉得能做到第二步的,大部分还是互联网公司,有丰富的数据产品,但是我见过德邦一些传统物流公司,也非常强调数据产品的建设,意识比较靠前。 能做到最后一步的,真是凤毛麟角。说实话,能有数据的公司是不多的,把数据变成一种业务的,更是不多的。比如阿里的生意参谋,可以说是数据业务化,提供数据给卖家,帮助卖家卖货,可以说把数据作为一种业务,可以挣钱。但是就我看来,这也只有一些头部公司,有海量数据,同时有对口的应用场景,可以做的到。
2020-04-01230 - Esun以我现在的理解,数据中台就是一个基于数仓又高于数仓的系统。它就是把以往搭建一个数仓所要做做的,数据同步,清洗,建模,分析等工作自动化。你只需要有少量的数据经验,就可以通过数据中台快速搭建自己的数仓。当然,因为数据得以集中,也可以产生更大的数据价值,更少的数据接口,更快的数据服务。讲起来简单,落地非常困难~~~~一个盯着dataphin看了一个月的数据小白总结
作者回复: 你好,我来点评一下哈。 首先,关于数据中台是自动化完成数据同步、建模、分析,这个其实不太准确。原先大数据平台,应该说就能够支撑数据研发链路的覆盖。数据中台更加关注在数据研发的效率、质量和成本三个方面。 其次,数据其中,产生更大的价值,更少的接口,更快的数据服务。 这个观点是正确的,数据的复用,提高了数据研发的效率。数据通过接口化的方式,提高了数据的接入效率和接入后数据的管理效率。
2020-03-30520 - 木匠外部业务系统和数据中台的关系是什么?我的理解是:数据中台抽取各业务系统的数据,经过加工后,形成统一的数据指标、模型,通过数据服务提供给业务使用。数据中台只对业务系统提供数据获取,业务不能对数据中台写数据。各个业务系统收集的数据,计算的中间结果数据,处理后的业务数据,存储在业务系统自身的数据库或数据仓库中。业务系统的存储和数据中台的存储相互独立,业务系统的数据在数据中台中有一份副本。
作者回复: 你的理解并没有问题,但是我想延申一下,业务系统、数据中台以及我想介绍的数据产品之间的关系。 首先,我们做数据中台为了什么? 我想先谈谈我们做数据中台的初衷。很多企业,做数据中台,本质上他们期望解决的是业务问题。什么是业务问题? 某个商品缺货了,我该补多少货? 每个养猪的养户,要分配多少猪苗? 某个商品打折了,我该把这个打折信息通过短信推送给谁? 数据中台,本质上是没有办法直接解决这些业务问题的,所以很多企业建了数据中台之后,发现并不能直接解决他们的业务问题,感到很失望,那我觉得,这个是对数据中台的定位没搞清楚。 数据中台只能提供高质量、高效率、低成本的数据,这些数据当然是产生业务价值必须的,但是这些数据还必须转化为决策,才能应用于业务。这个时候,我就要提到数据产品了。 我们认为,企业只有通过数据产品,才能实现从数据到业务的打通,数据产品要实现的是从数据,到决策的转化,然后将决策推送给业务系统,由业务系统来执行。比如,数据产品,根据数据,预测出某个商品要补多少货,然后通过API的方式,调用采购系统的API,发起补货流程。 业务系统的数据,由通过数据中台的数据传输工具,数据汇聚到数据中台,数据中台把各个业务系统的数据汇聚,加工,通过服务化的方式最终提供给数据产品。 所以数据产品、业务系统和数据中台,是这样一个三角关系,数据产品+数据中台,我们称之为数据生产力,他们的目的,就是让业务更智能,运行的效率更高! 顺着你的话题,我多讲了几句我们在多个业务中实践,感谢你的阅读,祝好~
2020-07-1615 - 唐永军郭老师,我理解数据中台是这样的,您看对不对啊。 就是把不同系统的数据,全部汇总到一个大的数据仓库。然后在数据仓库里各种数据的清洗 转化 装载 集成等工作,最后数据建模,把业务数据可视化的展现出来。 老师您看哪里理解的不对或有遗漏。
作者回复: 你好~ 你说的这个过程,在我看来,只能叫数据仓库。 数据中台的核心并不是要建数据仓库,他的核心在于“OneData”数据的复用和共享,所以强调数据只加工一次,这样才能高效的支撑前台的需求。这才是数据中台的精髓。 别急,你可以接着往后看,尤其是看看第一讲,我会详细的介绍数据中台、数据平台、数据仓库的区别,你就会明白了。至于“OneData”,你可以看第3讲,我会展开详细的介绍,包括方法论、支撑技术以及组织架构上的支持。 感谢你的阅读,我们下一次留言区见~
2020-04-2513 - 吴建中我理解的数据中台,一定是基于大数据体系的,内在是数据仓库,底座应该是大数据计算平台,数据中台建设的目的就是为了让数据持续的用起来,赋能业务,提高响应能力和洞察能力,有管理也有技术,驱动业务数据化,数据资产化,资产服务化,服务业务化的循环。数据中台就是要让数据这种资产价值最大化,成为企业的重要基础设施,重要的生产资料。
作者回复: 没毛病~
2020-04-0138 - iMARS我之前理解数据中台是将不同系统的数据进行标准化建模,然后对外提供统一的API,建模和对外API都是基于企业实际业务应用场景,以便企业进行决策参考。
作者回复: 没毛病~
2020-04-015 - solzs现在在公司也正在做数据中台的建设的工作,所以很期待!!!
作者回复: 感谢, 希望我的经验可以帮助你建好中台,用好中台。
2020-03-304 - Geek_albert睡觉前在B站刷到郭老师的数据中台live《为你剖析数据中台的现状及未来》,一口气看完睡意没了。我现任某创业公司数据团队负责人,在经历了两年粗放式的数据工作后,目前正在负责公司数据中台建设。郭老师在live中提到的数据工作中出现的痛点与问题,完全与我在工作中发现的痛点以及问题一致,我也高度认同郭老师对问题原因以及背后深层次原因的分析。因此,毫不犹豫的被引流到这里😂。希望能跟着郭老师交流学习,学习学习郭老师在这方面的深刻认识。
作者回复: 说实话,看到你的留言,非常感动,更加感到自己责任重大。 我写的这些问题,都是我们在做数据中台建设过程中遇到的问题,我们也认真的思考过,并想出了各种方案,解决这些问题,最终我们取得了不错的成果。 希望通过我的经验,分享给你,让你少走一些弯路,对你有所帮助。也欢迎你在留言区继续跟我交流~
2020-04-0723 - 草裡菌目前被任命负责数据中台建设,但是完全没有经验,看完了《说透中台》专栏还是有些懵,希望在此能有更多的收获。
作者回复: 这节课,其实是专门针对数据中台开设的,尤其是注重实践经验的传递,希望这些实际经验可以帮助你,也欢迎你继续与我交流~
2020-04-023 - Sandflass老师你好,我想问一下,数据中台建设的过程,是不是相当于把N多个不同部门不同应用的数仓进行融合的过程,特别是越在上游的数据融合度会越高,比如ODS层,大家基本只能共用一个库?
作者回复: 对的。
2020-04-0123