青云QingCloud：企业需求升级，大数据价值逐步进阶“数据层”

【环球网科技报道 记者 勃潺】作为数字经济深化发展的核心引擎，“数据要素”已成为最具时代特征的生产要素。2021年年底，《“十四五”数字经济发展规划》和《“十四五”大数据产业发展规划》的连续发布，进一步规范并推动了数据要素市场的培育、数据产业链的形成，以及整个数据产业生态的构建。

而对于企业来说，作为重要的生产要素，在进行数据的原始积累之后，通过技术挖掘大数据的潜在价值成为更重要的发展方向。

青云QingCloud大数据产品经理刘雄风认为，企业对大数据开发与治理的需求已经升级，从最初的“底层资源”问题，逐步进阶到“数据层”问题。从应用场景来看，数据同步、实时计算、统一监控和调度等已经成为了企业的主要需求。

单独来看，企业需要数据同步服务，来打通数据库、数据仓库、消息队列与中间件服务彼此之间数据孤立的关系。在众多IoT场景中，企业需要大数据平台对大量的设备数据、监控数据进行实时计算、分析、挖掘，最终转化为设备报告和流程优化相关的信息和知识。“这种反馈实时性越高，企业降本增效的效果就越好。”刘雄风提到。

此外，虽然青云已经提供了QingMR开源大数据组件，解决了客户的运维和部署问题，但还要满足客户数据开发和作业运维调度层面的需求。

“大数据的价值并不是数据本身，而是数据背后所隐藏的、对业务有影响的信息和知识。”刘雄风表示，要从数据层最终提炼到最上层的智慧层，数据需要经过很长链路的流式处理，没有一套完整的系统保证这条链路高效运转的话，就很难保证从数据中提炼出有价值的信息和知识。

但是，Hadoop作为目前应用最广泛的分布式大数据处理框架，一直被企业诟病使用门槛过高，尤其是对于缺乏大数据开发经验、大数据平台处于初期建设阶段的企业来说，他们需要的并不是 Hadoop、Spark、Flink 这些大数据产品组件的简单堆积，而是以这些技术为基础的、能解决业务问题的产品，从而释放运维压力，降低研发门槛，专注于解决业务需求。

因此，青云推出大数据工作台，通过整合青云完整的数据产品和服务，为客户提供了一个一站式智能大数据开发与治理平台。目前大数据工作台上线1.0版本，主要具备“数据集成、数据加工、统一数据存储和服务”功能模块，为企业数据价值挖掘提供支持。

刘雄风介绍，青云大数据工作台能够支撑企业在精细化运营分析场景、实时计算场景、可视化开发运维场景、构建数仓场景等场景下的功能需求。除现有功能模块外，青云还在规划数据治理、数据资产、优化体验等三个方面的功能。

值得一提的是，青云大数据工作平台依托青云的KubeSphere容器平台能力，在云原生的基础上进行部署，整体的大数据服务将会更加自由，同时可以兼容不同的容器平台，独立部署，不会受到厂商的限制，跨云、跨厂商、跨容器都可以运行。

此外，基于真实的客户场景，青云大数据工作台抽取最大化的公共需求，聚焦业务问题，能够以极简的操作步骤，让客户一键开启数据洞察之旅。

刘雄风强调：“我们的目标是做构建整个完整的企业级大数据平台和开源的生态，同样我们在组件方面也能提供可插拔的数据服务。”

事实上，青云大数据工作台已经在工业、交通等细分领域落地应用，并形成了一整套相对标准的体系和方案。接下来，除了应用到智慧工业上，青云大数据工作台还能应用到智慧零售、智慧政务和智慧校园，覆盖到四个“数智”化场景，持续产生“数智”化价值。