手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 星锐奖丨高传集:向前一步,就有答案

    上午九点,我按照约定好的时间,准备对高传集进行一次简单的采访,发现他正在翻阅我之前提供的问答提纲,果然思维缜密的典型工程师,从不打无准备之仗。 作为一位深耕技术领域17年之久的资深技术专家,高传集……

    时间:2024-02-21 08:53:44
  • 浪潮企业云×西安煤矿机械丨云帆一体机驱动,传统制造业加速迈入智能时代

    当积淀了七十余年重工业记忆的西煤机,与致力于产业智变的浪潮企业云相遇,一场“硬核制造”与“云端智慧”的融合就此展开。在“人工智能+”行动的指引下,西安煤矿机械有限公司(以下简称:西煤机)引入浪潮企业云打……

    时间:2025-11-28 13:07:24
  • 山能新矿内蒙古能源给机电管理装上“智慧脑”

    “根据矿井排水设备实时电流电压在线监测和排水流量分析,当前排水效率低于70%,系统发出预警信息,自动派发检修任务单,请及时跟进落实……”在山东能源新矿内蒙古能源榆树井煤矿生产调度指挥中心,工作人员白建波……

    时间:2023-03-23 11:46:11
  • 浪潮海岳智慧审计,有“数”可依,有“智”可循

    审计是党和国家监督体系的重要组成部分,总书记在2025年全国审计工作会议上强调“审计机关要不断提高审计监督质效,以高质量审计监督护航经济社会高质量发展”。 当前,审计信息化正经历着从传统模式向智能化转……

    时间:2025-04-07 10:21:55
  • 浪潮(东营)数据标注基地正式揭牌

    10月22日,浪潮(东营)数据标注基地揭牌暨利津数据(内容)产业园区项目集中签约仪式隆重举行,东营市委常委、副市长何宪卓出席活动。浪潮集团副总裁、浪潮卓数大数据董事长张帆与利津县委书记张亚东,共同为浪……

    时间:2024-10-24 09:43:45
  • 给力!浪潮卓数大数据马永飞斩获“山东省优秀项目经理”评选二等奖

    近期,在刚刚落下帷幕的“山东省优秀项目经理评选”活动中,浪潮卓数大数据基层数据治理事业部项目交付处副处长马永飞以优异成绩斩获二等奖。 本次评选针对山东省内拥有PMP、IPMP、信息系统项目管理师且工……

    时间:2023-11-07 15:58:54
  • 浪潮云三大项目入选2025年山东省数据要素市场化配置改革“揭榜挂帅”名单

    为扎实开展国家数据要素综合试验区建设,加快推进数据要素市场化配置改革,充分释放数据要素价值,近日,山东省大数据局正式公布2025年全省数据要素市场化配置改革“揭榜挂帅”名单,浪潮云牵头的“城市可信数据空……

    时间:2025-03-25 11:57:45
  • 构建高效数据生态,赋能业务创新发展 ——保定市深入开展数据归集行动

    数据是国家基础战略性资源和重要生产要素。加快构建全国一体化大数据中心协同创新体系,是贯彻落实党中央、国务院决策部署的具体举措。政府部门间、政企间数据壁垒进一步打破,数据资源流通活力的增强,对全国一……

    时间:2024-10-16 15:07:44
  • 听!钢轨的“健康密码”—浪潮云帆无损检测智能体为交通安全保驾护航

    随着工业4.0的深入推进,交通领域对设备安全性和运行效率的要求也不断提升,而无损检测技术作为复合材料全生命周期健康管理的“数字听诊器”,已成为保障交通工具健康运行的重要手段。在这场以“安全”和“效率”为核……

    时间:2025-03-28 15:30:13
  • 浪潮卓数大数据获亿元A轮融资

    向数而行,共谋未来。12月15日,浪潮集团权属企业浪潮卓数大数据产业发展有限公司(以下简称浪潮卓数大数据)在济南浪潮科技园举行融资签约仪式,正式宣告完成A轮融资。浪潮集团党委副书记、总经理刘继永出席签……

    时间:2023-12-18 09:27:36
随机推荐