手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 王龙飞:探亲时间表

    探亲时间表   宿迁/王龙飞     前几天,领导要去东北出差,考虑到我是东北人,到那边对接业务会比较方便,便让我一同前往。 我赶紧打电话把这个消息告诉我妈,隔着电话能听得……

    时间:2024-05-10 11:18:36
  • 天源长寿村从化水厂斩获优质矿泉水采矿权

    ■天源长寿村从化水厂周围一直保持着着良好的生态环境 近日,广东本土知名水企天源长寿村从化水厂成功取得广州市从化区吕田镇莲麻村饮用天然矿泉水采矿权,为企业从化新厂筑牢优质水源保障根基。此次采矿……

    时间:2026-01-12 13:50:04
  • AI产业应用再提速,AI基础软件发挥巨擎作用

    5月31日,由中国信息通信研究院、中国人工智能产业发展联盟主办,北京九章云极科技有限公司联合主办的【创造智能·探索未知】杭州通用人工智能发展论坛-AI基础软件前沿技术分论坛在杭州成功举办。大会聚焦AI……

    时间:2023-06-08 09:47:10
  • 电子凭证会计数据标准深化试点全面启动,浪潮海岳财务云保驾护航!

    2023年5月15日,财政部为了配合国家数字中国的发展战略,会计司组织召开电子凭证会计数据标准深化试点启动会,同时在财政部会计司官网发布相关配套标准、指南、工具包。浪潮通软作为电子凭证试点 “服务保障单位”……

    时间:2023-05-29 09:38:58
  • 首批国家级认证!浪潮海若词元工厂全项通过词元工厂服务质量评测

    10月30日,2026全球数商大会开幕,本次大会以“数智共生 链接世界”为主题,由世界数据组织WDO指导、上海数据集团有限公司等主办。在大会主论坛上,由国家数据发展研究院‌发起的首批词元工厂服务质量评测结果正式……

    时间:2026-11-04 16:46:02
  • 为基层减负,为实干赋能,淄博趟出基层数据治理新路子

    在淄博张店区潘苑社区,村居工作人员心中都有“一本明白账”。流动人口、特殊人群、重点关注人群、重点帮扶人群、低保人员……通过辖区内人口标签分类,实现了重点人员精细化管理,同时也可以针对性提供……

    时间:2024-03-28 15:37:56
  • 浪潮卓数大数据“数字商务运行决策中枢”:构建数字商务发展新格局

    数字商务作为数字经济发展最迅速、创新最活跃、应用最丰富的重要组成,正深刻改变国内外商业格局与贸易形态。面对日益复杂多变的全球贸易环境,如何精准把握新格局下的发展机遇,突破数据壁垒、激活数据价值,以……

    时间:2025-09-08 09:30:23
  • 浪潮海岳软件与东方电子集团签署战略合作协议

    7月11日,由山东省国资委、烟台市人民政府共同举办的 “企地共建·走进烟台暨省属企业寻标对标争创一流行动现场推进会”顺利开幕。会上,浪潮海岳软件与东方电子集团签署战略合作协议。 当下,智能化浪潮奔……

    时间:2024-07-15 10:05:10
  • 制创新机 链就未来—2024年东盟与中日韩(10+3)先进制造业云上对接会在南宁举办

    【△2024年东盟与中日韩(10+3)先进制造业云上对接会 会议现场 广西贸促会 摄】 合则立,合则惠,合则兴,至上之合,共生共赢。为贯彻落实党中央、国务院稳外贸稳外资政策部署,促进国内国际“双循环”,推动……

    时间:2024-08-14 17:30:41
  • 因聚而生,因数而兴!浪潮大数据产业联盟生态伙伴合作大会-四川站成功举办

    8月21日,由浪潮大数据产业联盟、浪潮集团四川公司、浪潮卓数大数据产业发展有限公司(简称浪潮卓数大数据)联合主办的生态伙伴合作大会-四川站在成都举行,来自各领域近百名名嘉宾亲临现场,共话四川省数据要素……

    时间:2024-08-22 09:02:38
随机推荐