对话智领云CTO宋文欣:读懂云原生时代的数据中台

by June 2021-11-03

中台的出现,无疑是对企业的组织架构、业务流程、运营方式的一次重新思考。在阿里提出中台的概念之后,中国的互联网企业乃至传统企业掀起了一股“中台热”,希望通过更精细、更完善的平台能力来支撑和驱动前台的业务获得成功。由此,业界也衍生出了一系列的“中台”,包括数据中台、业务中台、技术中台等等。然而在经历一段时间的热捧之后,企业对于中台的关注度似乎降低了不少,究其原因,与新技术的适应性和企业的认知不无关系。

以数据中台为例,数据伴随着信息的产生而存在,随着数据的规模快速增长、类型愈发复杂,使其很难跟上快节奏的业务创新。在数据存储层,以往企业在访问和调用数据时经常会在同一位置“撞车”,导致初期的资源共享架构在高频访问时会遇到崩溃的情况,更难以满足数据复制和迁移的需求。后来,有人想到可以把资源分散到不同的节点上,各节点之间不共享数据,以解决“抢资源”的问题。不过,这种没有存算分离的架构在系统扩容时往往会再次分配节点资源,这意味着数据要不断被移动,对使用体验有着不小的影响。

于是,“存算管”分离的底层架构诞生了,在存储、计算、服务层均有着更好的兼容性、易用性、扩展性。从某种程度上来说,这种架构的变化与数仓的演进或多或少有着联系。而随着企业对数据价值的需求进一步被放大,围绕数据的新理念和新技术也在持续发展,DataOps就是其中的代表。“DataOps的终极目标就是让数据科学家、数据工程师、数据运维人员等群体,能够在一套体系下,基于丰富的工具和方法论的支持,敏捷的进行数据开发和数据管理。”智领云科技联合创始人兼CTO宋文欣说。作为硅谷最早实践大数据技术的专家之一,宋文欣曾任Electronic Arts高级研发经理、ask.com Analytics技术带头人,拥有超过20年的软件开发、大数据及云计算经验。

智领云科技联合创始人兼CTO宋文欣

武汉智领云科技有限公司成立于2016年8月,专注于云计算、大数据领域前沿技术的研发,在能源、教育、医疗健康、物联网、金融等行业与国内外多家知名企业建立了合作关系,并获得了来自硅谷和国内知名投资人和投资机构的投资。2019年4月,智领云获得线性资本数千万元pre-A轮融资,2020年7月又获得金沙江联合资本领投,线性资本跟投的数千万元A轮融资。智领云的定位是云原生数据中台架构(BDOS)的技术和服务提供商,通过基于云原生的技术和方法论建设数字化驱动的底座,帮助企业打造适合自身业务发展的数据中台。

从信息化系统、数据仓库,到传统的大数据平台,再到数据中台,企业希望具备的能力同样在与时俱进,但要想获得全局数据驱动数据能力共享和复用,仍要解决系统复杂、管理困难、数据标准不统一、重复开发和使用成本高、业务数据孤岛等问题。数据中台所提供的,就是一致性的数据体验,包括统一的数据构建及管理、核心商业要素资产化,以及统一的数据服务。在此之上,形成了完整的平台和洞察能力,让用户可以随时找到所需数据,实现了全局的数据应用资产的管理、使用和共享。

相较于传统的数据中台,智领云打造的云原生数据中台顾名思义,就是要完全建立在云原生的架构上,其优势可以体现在四个方面:部署更加简单快捷,可持续发布,运维效率提升;更快更方便地引入数据分析和数据科学的组件;更充分有效地利用集群的计算/存储资源;更弹性的资源调度架构支撑分布式的机器。同时,企业在实施中台战略时还要有由上至下的策略和决心,并且有相应的人才和长期投入。在数据中台的生态体系中,智领云专注于云原生DataOps建设,大幅简化了用户在开发时选择数据工具的复杂度,让各种能力更便捷的被集成,之上去完善数据安全、数据质量、数据集成,把底层繁琐的工作“屏蔽掉”。

此外,云原生DataOps提供了标准和开放的接口,这种开放性也让智领云的“朋友圈”不断在扩大。云原生DataOps就像是数据基础架构的底座,可以融合任何一家厂商的计算、存储等服务,集各家之所长,构成完整的解决方案提供给客户。

基于开源的组件和标准,客户能够轻松获得AI/ML、数据安全、状况监控、可视化等各种服务,快速将业务部署上线。如果需要更高阶的能力,则可以直接购买商业版本,得到更专业的服务支持。基于过去多年的经验积累,智领云的专家们会根据客户的业务性质给出相应的方案建议,从顶层设计入手参与建设,使其满足相关的数据标准规范。与此同时,也会建议客户采取顺应转型需求的组织调整,推动公司内部按部就班的施行数字化战略,让其可以逐步看到分阶段的目标实现效果。这一过程中,还会启发企业进行自助工具的开发,快速应对当前的业务要求。宋文欣称:“在数据中台从0到1的建设过程中,我们的方法论和经验是很大的优势。同时,我们也在积累一些行业解决方案的经验。”

当然,任何一家企业在接受新技术时都会有一段必经之路,尤其是对于中国的传统企业来说,如何从理解云原生的理念,到真正实施云原生数据中台架构,仍面临着价值的重新判断。对此,首先要摒弃“特效药”的思维,数据中台并不能让项目立竿见影的出现效果,其次,数据中台也不是“万能药”,无法解决企业的所有问题。数据中台要做的是,为企业提供一种有效的手段去解决相应的实际挑战,而不是帮助企业选择发展方向。

随着数字化实践的深入,越来越多的企业和机构认识到了云原生架构的价值。在智领云的帮助下,武汉卫健委将部署的节点从300+简化到100+,实现了显著的降本增效,并且让支撑5000万人规模核酸检测的系统可以在10分钟内扩展一倍。而在过去,这样的架构扩展通常要耗费数天的时间。

如今,各家企业都在基于数据资产构建更加精细化的运营体系。成立于2014年的衣邦人以互联网+工业4.0的思维切入服装定制行业,需要打造一套新型的电商解决方案,即线上推荐商品后,由线下顾问上门为顾客量体裁衣,七天之后把商品送货上门,后续还会搭配一些售后服务,并且还会有一系列的套装系列。因此,衣邦人需要数据中台支持长期、动态、持续增长的业务发展。

例如,商家会打通各平台的数据,分析广告受众的喜好以决定接下来的投放和服务策略,结合AI/ML算法进行精准推荐,并根据及时反馈数据开发相应的数据应用,继续推动业务快速发展,形成良性循环,这种能力是在云原生数据中台的帮助下,可以由企业自行去搭建的,可自由选择底层的软硬件也让企业有了充分的自主权。过去,衣邦人使用的数据分析软件虽然是开箱即用,但数据洞察并不可见,有些业务痛点并没有被反映出来,而且标准化的产品无法根据实际需求去做细颗粒度的开发。衣邦人认为,需要有一套可以自主掌控的系统来应对不断变化的业务需求,于是就找到了智领云。

下一步,智领云会继续在全国范围内汇聚深耕行业实践、熟知信息化建设的专业人才,联合云原生领域的技术伙伴,携手各家技术和服务提供商,在DataOps层面提供更加完善且开放的云原生数据中台。“未来三至五年,我们希望中国企业都能接触到云原生的IT架构,到时候云原生DataOps就会成为云原生数字化驱动IT架构中的标配,可以说是一种‘粘合剂’,能够集成生态中的每一家企业,满足客户各种各样的需求。”宋文欣谈到,“我们将是所有这些IT架构的基础中,不可缺少的一层。”

留言

评论

${{item['author_name']}} 回复 ${{idToContentMap[item.parent] !== undefined ? idToContentMap[item.parent]['author_name'] : ''}} · ${{item.date.slice(0, 10)}} 回复

暂时还没有一条评论.