手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 长宁县知联会集中学习中共四川省委十二届三次全会精神

    6月29日,长宁县知联会在会议中心3号会议室召开第一届一次会员大会集中学习中共四川省委十二届三次全会精神。县委统战部副部长、民宗局局长张学元主持学习会,县知联会90余名会员参与学习。 会上,张学元……

    时间:2023-07-03 13:18:17
  • AI赋能新引擎,企业聚力主平台——第22届中国—东盟商务与投资峰会即将启幕

    9月5日,中国—东盟商务与投资峰会秘书处秘书长、广西贸促会会长杨雁雁接受媒体联合采访,介绍第22届中国—东盟商务与投资峰会筹备情况。中国—东盟商务与投资峰会迄今已举办21届,通过高层对话、经贸合作机制搭建……

    时间:2025-09-09 13:38:47
  • 数据云说 | 数据云采集之道

    2022年,中共中央、国务院印发了《关于构建数据基础制度更好发挥数据要素作用的意见》,旨在充分促进激活数据要素的价值。2023年2月,国务院发布《数字中国建设整体布局规划》,引起讨论热潮。数字中国建设的目……

    时间:2023-06-16 09:34:54
  • 2025浪潮数字企业创新论坛哈尔滨站成功举办

    5月23日,2025浪潮数字企业创新论坛在哈尔滨成功举办。活动以“AI向新 潮涌未来”为主题,聚焦人工智能大模型与企业经营管理、生产运营各环节的深度融合,共话企业数智化转型新蓝图,推动企业管理迈向智能化、高效……

    时间:2025-05-29 12:26:54
  • XRMID 2023投融资论坛即将开幕,议程速览

    近年来,我国高度重视虚拟现实及元宇宙的技术产业发展,并在国家层面积极规划和重点布局,《中华人民共和国国民经济和社会发展第十四个五年规划和2035年远景目标纲要》中明确指出在数字经济重点产业中,虚拟……

    时间:2023-04-23 15:44:58
  • 寻访万里茶道|新晋非遗传承人郑磊 放弃北京扎根山里做茶农

    2025年2月初,武夷山市公布第五批市级非物质文化遗产项目代表性传承人名单,郑磊榜上名。 郑磊本人的经历更像一本爽文小说,大学毕业放弃北京的生活和高薪工作扎根武夷山做茶;打小喝绿茶长大的他,着迷……

    时间:2025-03-14 11:26:55
  • 数智引领 财赋未来——中国能建财务数智化转型之路

    为全面贯彻落实集团发展战略,中国能建携手浪潮通软建设智慧财赋平台,全面构建以价值创造为导向的战略适配型财务管理体系,以数字技术驱动财务创新,形成业、财、资、税、档、表的深度融合和一体化闭环管理,充……

    时间:2024-12-10 16:17:20
  • 浪潮通软签约广西投资集团,助力世界一流财务管理体系建设

    近日,浪潮通软签约广西投资集团有限公司(以下简称“广投集团”)。此次合作,双方将基于浪潮海岳软件,搭建全集团统一的财务共享平台。该平台建成后,将为广投集团建立起标准化体系,横向实现业务到财务的前后衔……

    时间:2023-11-16 19:16:21
  • 收官!2025浪潮大数据产业联盟生态伙伴合作大会圆满落幕

    齐心鲁力,点数成金。6月27日,2025浪潮大数据产业联盟生态伙伴合作大会收官站在济南浪潮科技园圆满落幕,众多行业专家、生态伙伴汇聚一堂,共同探讨数据要素赋能山东经济社会高质量发展的新思路、新模式。 ……

    时间:2025-06-30 14:12:45
  • 数据赋能,以“场景+应用”助力吉林社会工作数字化转型

    11月22日至23日,一场聚焦志愿服务高质量发展的盛会——“吉林省志愿服务高质量发展交流活动”在长春成功举办。本次活动由吉林省委社会工作部指导、吉林省志愿服务联合会承办,旨在深入贯彻《关于健全新时代志愿服务……

    时间:2024-11-25 08:49:31
随机推荐