手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 【浪潮星锐】星锐之星尹萍:一直前行方可一直突破

    “把科研成果赋能千行百业,不尚空谈、不务虚功。”当谈及研发初心时,尹萍目光坚定地说道。 正是秉持这份知行合一的理想信念,她一步一个脚印稳步前行,从智慧城市建设,到“无处不在的计算”,再到“有云处皆智……

    时间:2026-03-31 10:53:37
  • 浪潮承建 | 天津城投集团电子采购平台正式落成!

    近日,基于浪潮海岳采购云搭建的天津城投电子采购平台正式落成。作为推动天津城投集团数字化转型的重要举措,平台落成揭牌标志着集团招采数字化转型跨入新征程、“阳光国企”建设取得新突破,将有效规范采购管理、……

    时间:2023-07-11 14:29:37
  • “AI基础软件前沿技术分论坛”重磅来袭!诚邀共享技术盛宴

    AI基础软件前沿技术分论坛亮点抢先看 “杭州通用人工智能论坛暨AIIA人工智能产业发展大会”将于2023年5月30日-31日在杭州举办。本次人工智能产业发展大会由中国信息通信研究院、中国人工智能产业发展联盟主……

    时间:2023-05-24 15:03:15
  • 武汉国家粮食交易中心:数智化穿透式监管的地方储备粮竞价交易新实践

    在国家粮食安全战略深入推进、地方储备粮监管数字化转型加速的双重背景下,破解传统储备粮交易“监管滞后、数据割裂、风险难控”的痛点,成为保障粮食安全的关键命题。在湖北省粮食局的指导下,华粮科技携手武汉国……

    时间:2025-09-01 10:56:51
  • 浪潮数字企业受邀参加2025世界人工智能大会

    7月26日至28日,2025世界人工智能大会(WAIC)在上海盛大开幕。此次大会以“智能时代 同球共济”为主题,集中发布3000余项前沿展品,覆盖大模型、AI终端、智能机器人等核心领域,规模刷新历届纪录。浪潮数字企业受……

    时间:2025-07-30 17:49:42
  • 浪潮海若大模型V3.0等三款产品重磅发布

    8月28日,2024中国国际大数据产业博览会成功开幕。博览会期间,浪潮海若大模型V3.0、冻肉产业云服务平台、榴莲产业云服务平台三款产品重磅发布,充分展现了浪潮云源源不断的创新能力与持续聚焦行业的探索能力。 ……

    时间:2024-09-01 22:19:24
  • 浪潮云精彩亮相第22届中国-东盟博览会

    9月17日,第22届中国-东盟博览会在广西南宁正式开幕,本届东盟博览会以“数智赋能发展,创新引领未来——以中国-东盟自贸区3.0版新机遇助建命运共同体”为主题,汇聚来自45个国家的3200余家企业,致力于构建更为紧密……

    时间:2025-09-19 08:54:26
  • 醉得意赴柘荣高峰村溯源高山萝卜订单 农业公益助农,打通田间到餐桌共富链路

    本报讯 以食材溯源严把食品安全关口,以订单农业践行公益助农、助力乡村振兴。近日,醉得意轮值董事长许艺民带队驱车近三小时,奔赴宁德柘荣高峰村开展高山白萝卜原产地溯源考察,并与该村达成订单农业合作,通……

    时间:2026-10-24 08:35:34
  • 首批入选丨浪潮云入选AISHPerf基准-词元专项工作组成员单位

    近日,2026年“众智”大模型开放智算生态协同高级别研讨会在北京成功召开。会上,AISHPerf基准-词元专项工作组正式成立,浪潮云旗下山东浪潮海若人工智能有限公司入选首批成员单位并获授牌。 AISHPerf基准-词元……

    时间:2026-07-09 14:30:37
  • 屈建民:成为传奇的人生选择

    2024年1月,屈建民来到武汉,约一个当地的老友见面。老友见面问他此行目的为何,屈建民回答说出差。出差,老友很诧异,你不是几年前辞职看世界去了吗,又回来工作了?屈建民反问,这对我来说不是一件很正常的事……

    时间:2024-04-01 12:16:06
随机推荐