手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 浪潮云助力华东空管局数据平台项目荣获“数字交通先锋”优秀案例

    近日,中国信息通信研究院与中国交通运输协会信息专业委员会联合举办的“第二届深度用云之:数字交通先锋案例”评选结果正式揭晓,其中浪潮云与华东空管局联合申报的“华东空管局数据平台项目案例”在全国40余个案例……

    时间:2024-10-29 09:38:12
  • 创业时代结局关键词分析(创业史结局是什么意思)

    可能被取代创业时代 结局。 小型化是PC发展过程中非常重要的一个方向,尤其是笔记本产品线体现的最为明显。但同样是PC中重要的分支——台式机却似乎并不在意体积,尤其是DIY市场,绝大多数台式机机箱仍为中塔机箱,……

    时间:2023-01-06 22:36:51
  • 山东海化集团携手浪潮数字企业,打造“人工智能+”化工创新应用新标杆

    近日,山东海化集团与浪潮数字企业联合研发的“基于海岳大模型的盐化工智控大模型”已全面投入生产实践,围绕工艺、设备、巡检三大环节系统推进,助力化工生产实现“安、稳、长、满、优”的智能化目标,该合作项目不……

    时间:2025-12-05 10:23:04
  • 桓台县民政局以民政数据加速智慧城市建设

    数据化发展成为现代化进程中重要的发展阶段,目前各地均开展数据化城市建设,我县为响应党的二十大报告中“加块建设现代化产业体系”的要求。大力发展城市大脑项目,民政局作为重要的民生项目,我局多措并举做好民……

    时间:2023-11-02 09:54:48
  • 浪潮云助力济南市审计局荣获山东省“数据要素×”数字机关赛道一等奖

    近日,由国家数据局、山东省人民政府指导,省大数据局等联合主办的2025年“数据要素×”大赛山东分赛决赛获奖名单正式公布。浪潮云联合济南市审计局打造的《数据赋能审计增效 大模型智启AI审计新时代》解决方案在64……

    时间:2025-10-27 10:27:57
  • 浪潮云精彩亮相2024香港国际创科展

    4月13日,2024香港国际创科展在湾仔香港会议展览中心正式开幕。本届创科展以“智慧创新 联通世界”为主题,汇聚来自香港、中国内地、新加坡等地2600家展商,充分展示新一代尖端技术和科技解决方案,聚焦智慧城市、……

    时间:2024-04-18 10:21:45
  • 第七届“一带一路”青少年创客营与教师 研讨活动(中国—中亚板块)在新疆 正式开营

    11月6日,第七届“一带一路”青少年创客营与教师研讨活动(中国—中亚板块)在新疆乌鲁木齐正式启动。来自“一带一路”共建国家的青少年与教师代表通过“体验式互动式交流”深度感受中国新疆魅力,促进科技文化交流共享……

    时间:2023-11-09 17:27:12
  • 烟台市镇街综合数据平台:数据活水畅通基层治理大动脉

    编者按: 5月24日,国家数据局会同多部委在第七届数字中国建设峰会上发布全国首批20个“数据要素x”典型案例,通过示范引领,激励各方积极参与释放数据要素价值。 近期,国家数据局在官方公众号陆续发布“数……

    时间:2024-06-26 16:32:07
  • 【数据云说】云集·物联感知平台:全域归集,物联万物

    摘要:通过科技创新、场景应用、价值运营融合发展,助力政企用户实现价值提升 据相关数据统计,2022年,全球物联网设备数量预计将增长18%,达到144亿台。随着供应限制的缓解和增长的进一步加快,预计2025年将……

    时间:2023-07-19 15:16:04
  • 长宁县委书记徐创军调研民营企业重点项目要素保障

    6月12日,县委书记徐创军带队到经开区调研重点项目要素保障工作。他强调,县级相关职能部门要主动深入项目一线,强化要素保障,用心用情精准服务,全力加快项目建设,力争项目早日投产达效。 “污水管网、电力……

    时间:2023-06-15 17:04:28
随机推荐