手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 【浪潮星锐】星锐英才张敏:心有繁星,逐光而行

    心有繁星,不惧前路漫漫;逐光而行,终能抵达山海。对张敏而言,从产品经理到全能ACE,她在技术拓荒与成果落地的道路上从未停歇。 参与构建人工智能工厂,系统性解决行业AI落地“最后一公里”难题;打造不同角……

    时间:2026-03-31 10:51:55
  • 北京开封企业商会,扬帆再出发!

    ——北京开封企业商会第三届第一次会员代表大会暨换届大会举行 12月24日,北京开封企业商会第三届第一次会员代表大会暨换届大会在北京亦庄丰大国际酒店举行,开封市有关领导、在京开封籍各部委领导和在京企业家……

    时间:2023-12-26 15:08:00
  • 浪潮卓数大数据与银联商务达成战略合作

    6月13日,浪潮集团旗下卓数大数据与银联商务股份有限公司(以下简称:银联商务)在济南签署业务合作框架协议。浪潮卓数大数据总经理徐宏伟,银联商务党委委员、副总裁孙战平出席签约仪式,并就深化业务合作交换……

    时间:2023-06-30 19:04:26
  • 浪潮云的AI“足迹”

    当算力基建化作数字经济的“新水电”,当多模态交互重构人机协作新范式,2025年,人工智能浪潮已从技术概念深度融入产业肌理。从《政府工作报告》到国务院发布《关于深入实施“人工智能+”行动的意见》,再到中央经……

    时间:2026-01-14 08:48:38
  • 第21届中国—东盟商务与投资峰会 亮点和成效

    【△第21届中国-东盟博览会 中国-东盟商务与投资峰会闭幕新闻发布会 主办方 摄】 9月28日,第21届中国—东盟博览会、中国—东盟商务与投资峰会闭幕新闻发布会在南宁召开。中国—东盟商务与投资峰会秘书处副秘……

    时间:2024-09-29 18:27:18
  • 2024年全球“Z世代”湄洲岛对话会 成功举办

    11月18日下午,以“大爱和平 文明互鉴”为主题的2024年全球“Z世代”湄洲岛对话会在莆田市湄洲岛妈祖文化论坛会址举行。莆田市人民政府副市长林韶雯、中国日报社21世纪报社总编辑曾庆锴、北京大学校务委员会副主任叶……

    时间:2024-11-21 17:49:30
  • 【浪潮星锐】时云智:楫数字之舟,扬帆远航

    在快速更迭的数字时代,万物互联的智能世界正逐渐成为现实。每一位技术开拓者,恰似勇敢的航海者,在这片无垠的海洋中破浪前行。 拥有“1开头、4位数”的工号,在“圈内”俗称“老浪潮”,时云智从大学毕业便加入浪……

    时间:2025-03-05 10:37:12
  • 虚实共生·智启未来—虚拟现实产业协同发展研讨会在京成功举办

    在科技蓬勃发展的今天,虚拟现实技术作为前沿领域,正以前所未有的速度融入各个行业,为众多产业带来全新机遇与变革。4月23日,由北京市科学技术协会创新服务中心、石景山区科学技术协会共同主办的“虚实共生·智……

    时间:2025-04-24 09:43:00
  • 张帆受邀出席2024中国绿色算力大会

    6月29日,以“激活数据要素价值 赋能新质生产力发展”为主题的2024中国绿色算力大会-数据要素市场化平行会议在呼和浩特召开。浪潮卓数大数据董事长张帆受邀出席,并作题为《数据要素X 激发数据市场化潜能》的主旨……

    时间:2024-07-01 09:53:51
  • 南溪区信访局召开2023年南溪区信访工作业务培训会

    为进一步学习贯彻 《信访工作条例》,更好地适应新形势下信访工作形势和任务需要,全面提高全区信访系统工作人员的综合业务能力,7月12日,区信访局在信访会议室召开了2023年南溪区信访工作业务培训会。本次培训……

    时间:2023-07-13 16:52:47
随机推荐