手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • “基层一张表”背后的减负之道

    长期以来,党中央高度重视基层减负工作。破解“基层统计任务多、重复多头填报、上下部门数据共享难”等问题,关键在于强化基层智慧赋能、健全基层减负常态化机制。 浪潮卓数大数据在服务基层治理数字化转型过程……

    时间:2024-05-09 13:53:40
  • 浪潮卓数大数据精彩亮相2024数博会

    由国家数据局首次主办、贵州省人民政府承办的2024中国大数据产业博览会(简称数博会)8月28日在贵阳开幕。本届数博会以“数智共生:开创数字经济高质量发展新未来”为主题,通过开幕式、展览、行业交流活动等……

    时间:2024-08-29 17:24:46
  • 首批首家!浪潮云首批通过分布式云全局管理能力评估

    在数字经济的蓬勃发展浪潮中,各行各业都在积极探索和应用数字技术,分布式云作为一种满足更广连接、更低时延、更全局化需求的云计算新模式,逐渐成为承载政企数字化转型、加速行业高质量发展的关键能力支撑。近……

    时间:2023-07-15 14:41:30
  • 2023操作系统大会| 浪潮海岳携手openEuler联合创新,打造高效低代码开发能力

    12月15日-16日,以“崛起数字时代 引领数智未来”为主题的操作系统大会&openEuler Summit 2023在北京举办,大会由开放原子开源基金会、中国电子技术标准化研究院、国家工业信息安全发展研究中心、中国软件行业……

    时间:2023-12-20 16:22:46
  • 深耕基层减负,浪潮卓数大数据以先行实践筑牢“一表通”建设标杆

    近日,国家数据局召开“一表通”系统建设推进会,明确指出“一表通”建设是落实中央决策部署的政治任务,更是释放数据要素价值、为基层“表哥”“表姐”减负的关键举措。会议强调,要优化建设方案、强化协同沟通、完善移……

    时间:2025-12-23 17:18:33
  • 长宁县领导在分会场参加四川省“侨爱工程-送温暖远程医疗站”第七期启动仪式

    2023年8月11日,四川省“侨爱工程-送温暖远程医疗站”第七期启动仪式在主会场雅江县人民医院举行。省委统战部副部长、省侨办主任文甦出席活动并讲话。 四川省人民医院副院长王晓波、四川惠宜康科技有限公……

    时间:2023-08-15 15:42:34
  • 浪潮傲林受邀参加2024新一代信息技术助力新质生产力发展大会

    近日,以“新技术、新动能、新优势”为主题的2024新一代信息技术助力新质生产力发展大会在京举行,大会由中国工业合作协会、清华大学互联网产业研究院、北京亚太经济合作促进会联合举办,科学技术部原副部长吴忠泽……

    时间:2024-07-29 09:13:58
  • 生活中的创新有哪些(生活中创新的事物有哪些)

    现在很多年青人和小编一样不想在厂上班,都想着自己创业更有前途,那么现在创业做什么好呢?都有哪些创新创业的小点子呢?跟着小一起来看看吧。 1、功能饮料 功能饮料市场,在过去一年不断有新玩家入局。由于其功……

    时间:2023-01-06 22:42:44
  • 石景山区通用人工智能大模型产业集聚区揭牌仪式成功举办

    迈向通用人工智能,大模型发展开启新篇章。由市科委中关村管委会、市经济和信息化局指导,石景山区人民政府主办的“通用人工智能大模型产业发展论坛暨石景山区通用人工智能大模型产业集聚区揭牌仪式”,于11月7日……

    时间:2023-11-08 12:14:27
  • 浪潮数据库张晖:能源产业发展的底色是科技创新

    伴随着物联网、大数据、智能化技术的迅猛发展,以知识赋能、数据增效为本质特征的新型工业化已成为驱动我国传统产业可持续发展的新动能。2022-2023年,我国“双碳”目标已从顶层设计逐步深化为各行业的落地举措,……

    时间:2024-05-30 10:35:35
随机推荐