手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 浪潮云启操作系统全栈优化能力突出,夯实数字基础设施底座

    近日,TPC Express Benchmark V(简称TPCx-V)更新了最新的排名结果,基于浪潮云启操作系统(InLinux)部署的浪潮云算力平台ICP成功登顶全球第一,在云服务器性能测试中达到4640 tpsV(每秒事务处理吞吐量)。这一……

    时间:2024-11-07 10:28:55
  • 震撼来袭,精彩前瞻|2024人工智能大模型产业发展大会即将召开

    大模型、机器人、智能制造、自动驾驶……过去一年,人工智能频上头条,也成为2024年十四届全国人大二次会议上的热词。李强总理在2024年政府工作报告中提出,深化大数据、人工智能等研发应用,开展“人工智能+”行动……

    时间:2024-04-03 16:37:01
  • 新理财|对标世界一流,构建智慧税务管理体系

    构建智慧税务管理体系,企业需要结合自身规模、业务特征及管理需求等方面的具体情况,选择合适的税务管理模式和建设路径,要考虑到信息系统未来的发展空间,保证系统可集成、可兼容、可更新,搭建一个自主可控、……

    时间:2023-03-31 11:42:44
  • 浙资运营:数智赋能,打造高质量、强韧性智慧国资运营标杆

    为推进企业数智化转型升级进程,浙资运营携手浪潮海岳深化数字化综合服务平台建设,致力于将浙资运营打造成为高质量、强韧性的智慧国资运营标杆企业,为建设具有国际视野、创造卓越价值的一流国资运营平台注入数……

    时间:2024-05-20 10:00:48
  • 852公里中外“群英”荟聚厦门翔安新圩6天6夜超马开创新纪录

    1月12日10点整,2025第三届厦门6天6夜超级马拉松全球极限赛鏖战144小时,各路选手战胜寒夜、狂风与强光后强劲冲线突破自我。601号陕西西安安徽籍选手程延春(程大度)挺进852公里以达标国际级的成绩勇夺第一……

    时间:2025-01-14 14:00:27
  • 成功验收!浪潮携手中国黄金集团打造世界一流人力资源管理体系

    近日,中国黄金集团人力资源信息化项目成功验收,助力集团智慧人力资源管理体系建设,让人力资源管理更加智能化、高效化、精细化,为集团高质量发展注入新能量。 中国黄金集团有限公司是中国黄金行业唯一……

    时间:2023-07-21 08:07:35
  • 浪潮卓数大数据项目入选2025年山东省数据要素市场化配置改革“揭榜挂帅”名单

    近日,山东省大数据局公布2025年全省数据要素市场化配置改革“揭榜挂帅”名单,由浪潮卓数大数据联合山东数据交易有限公司、山东省国家知识产权保护中心申报的“数据要素市场体制机制研究与实践”项目成功入选“数据……

    时间:2025-03-11 08:37:34
  • 工赋山东 | 浪潮海岳赋能日照企业高质量发展

    近日,日照市制造业数字化转型大会暨“工赋山东”浪潮七大专项行动活动成功举办,浪潮数字企业总经理魏代森出席活动。会上,浪潮数字企业从经营管理数字化和生产运营数字化两个层面,分享了浪潮海岳企业数字化平台……

    时间:2023-06-29 22:25:55
  • 筠连县委统战部传达贯彻市委统战工作会议和全市统战部长会议精神

    2月18日,筠连县委统战部召开干部职工会议,专题传达学习贯彻市委统战工作会议和全市统战部长会议精神,研究贯彻意见。 会议要求,一要深入学习贯彻党的二十大精神和习近平总书记关于做好新时代党的统一……

    时间:2023-02-20 08:57:01
  • 浪潮通软签约中国诚通,共筑费用管控智慧新防线

    近日,浪潮通软与中国诚通控股集团有限公司(简称“中国诚通”)正式达成签约合作。双方将携手推进中国诚通费用管控系统建设,以建设世界一流财务管理体系为指引,全力提升集团费用管理效能、资源配置能力与风险防……

    时间:2025-05-29 13:12:19
随机推荐