手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • “青春礼赞二十大·踔厉奋发新征程”

    为纪念五四运动104周年,集中展示新时代筠连各族青年的精神品格和价值追求,激励和引领全县各族青年立大志、明大德、成大才、担大任,做有理想、敢担当、能吃苦、肯奋斗的新时代好青年,5月4日,由县委组织部、……

    时间:2023-05-10 16:46:35
  • 鞍前马后什么意思啊?(鞍前不越位马后不掉队意思)

    有句俗话鞍前马后什么意思,“五十亲三人,如玩火自焚”。意思是说,一个人如果五十岁了还跟某三种人亲近,就好比玩火自焚! 这三种人,各有不同,各自理解也不同。大体来说,贪财、势利、薄情这三种人是必须远离的……

    时间:2023-01-06 22:39:49
  • 四川温州瑞安商会一行到长宁考察文旅项目

    3月2日,四川温州瑞安商会会长李丰地及成都长宁商会会长牟世昆率队到长宁考察文旅项目,寻求合作商机,共谋长宁文旅发展。县委常委、宣传部部长肖珊,县政协副主席周小雨陪同考察。 考察组一行先后前往梅……

    时间:2023-03-17 11:34:16
  • 浪潮云融媒体制作云平台1.0版本重磅发布

    6月29日,浪潮集团六月科技成果发布大会在浪潮科技成果发布厅成功举办。会议期间,浪潮云融媒体制作云平台1.0版本重磅发布。 随着云计算、大数据、5G、4/8K、区块链等高新前沿技术的发展,媒体行业在资源……

    时间:2023-06-30 09:43:50
  • 台积电芯片工厂(世界三大芯片生产商台积电)

    北京时间1月12日早间消息,据报道,日本向芯片制造商提供补贴,吸引厂商前往日本建厂;但厂商拿到补贴可能要达到一定要求,日本准备要求芯片商工厂至少维持生产10年。 上个月日本通过芯片补贴法案,法案最快3月就……

    时间:2023-01-06 22:42:05
  • 山东省郯城县花园镇刘湖村:家风学风双轮驱动 孕育人才济济新篇章

       盛夏时节,山东省郯城县花园镇刘湖村博士巷的大学堂内书声琅琅,村民们的学习热情与夏日阳光同样炙热。退休教师刘保民作为该村的“博士之家”家长,利用暑假时间,在大学堂内辅导本村及外来孩子学习……

    时间:2024-07-17 08:58:25
  • 浪潮一体化政务大数据平台获国际先进水平认定

    近日,浪潮一体化政务大数据平台关键技术及应用顺利通过山东电子学会的科技成果评价,获得国际先进水平认定。 浪潮一体化政务大数据平台产品采用云原生架构,突破了大数据智能调度、高速跨网数据采集、基于知……

    时间:2024-07-31 10:41:35
  • 划重点!2023年中央一号文件粮食行业数字化转型要点速览

    2月13日,《中共中央 国务院关于做好2023年全面推进乡村振兴重点工作的意见》发布。这是21世纪以来第20个指导“三农”工作的中央一号文件。文件指出,抓紧抓好粮食和重要农产品稳产保供,全方位夯实粮食安全根基,……

    时间:2023-02-15 15:12:03
  • “跨界融合,创新未来”XRMID 2023 –虚拟现实及元宇宙论坛在京举办

    虚拟现实和增强现实技术与云计算、大数据、物联网、工业互联网、区块链、人工智能一并纳入重点开发产业。国务院发布的《“十四五”数字经济发展规划》中明确表示要创新发展“云生活”服务,深化人工智能、虚拟现……

    时间:2023-04-23 15:59:35
  • 浪潮集团财务共享中心顺利通过省国资委验收评估

    近日,山东省国资委对省属企业财务共享中心建设成果开展验收评估,并召开评估结果反馈专题会议。浪潮集团财务共享中心顺利通过验收评估,并被评定为“卓越期”阶段企业,标志着浪潮集团财务数智化转型迈入新阶段。……

    时间:2025-12-01 09:29:08
随机推荐