手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 献给来到这座城市并深爱于此的新市民朋友

    究竟是什么 让你觉得厦门没有冬天? 一定是这份暖暖的鼓浪屿馅饼吧 是“拾味厦门·馅饼“招”待!” 带你探索的厦门古早风味 是招商银行厦门分行 想要温暖每一位 来到厦门打拼的新市民的心 ……

    时间:2023-12-07 13:31:27
  • 上饶高铁投资公司完成江西首个自动驾驶数据资产入表

    近日,上饶高铁经济试验区投资建设有限公司(简称“高投公司”)全资子公司上饶高铁经济试验区资产运营管理有限公司(简称“资管公司”)成功完成数据资产入表工作,成功打造江西首个自动驾驶数据资产入表案例,这标……

    时间:2024-09-18 09:39:00
  • 长宁县委统战部到古河镇调研宗教工作

    8月24日,长宁县委统战部副部长、县民宗局局长张学元到古河镇飞泉寺调研宗教工作。古河镇党委委员、政法委员、统战委员余复安等参加调研。 调研组实地查看了场所消防、食品安全等重点领域安全工作落实情……

    时间:2023-08-29 13:26:04
  • 2025-2026赛季VEX机器人亚洲公开赛国际签名赛新闻发布会在京召开

    2025年11月18日,2025-2026赛季VEX机器人亚洲公开赛国际签名赛新闻发布会在京成功举办。本次发布会以“以智慧与科技,筑造和谐盛世”为主题,正式拉开新赛季赛事筹备工作序幕。 中关村数智人工智能产业联盟……

    时间:2025-11-19 11:59:00
  • 浪潮卓数大数据连续5年强势入选“中国大数据企业50强”

    8月3日,大数据与数字经济大会暨2023(第八届)中国大数据产业生态大会在北京召开,浪潮卓数大数据作为中国大数据产业生态联盟副理事长单位应邀参加本次盛会,董事长张帆出席开幕式并作主旨演讲。浪潮卓数大数据……

    时间:2023-08-04 16:57:51
  • 2025“智” 启未来丨浪潮云算力平台ICP,领航数智变革新纪元

    2024年,智算产业井喷式发展,“云+智算”加速融合,“人工智能+”进入全新发展阶段,智能体、大模型等前沿技术在行业内引发创新风暴,成为企业竞相角逐的关键赛道。算力平台ICP作为浪潮云智算稳固基石,以极致性能……

    时间:2025-01-07 07:44:58
  • 严格保证开发质量,浪潮海岳代码审查工具iCodeScan3.0正式发布

    近日,浪潮海岳代码审查工具iCodeScan3.0正式发布,该工具可有效拦截事务未提交、数据库连接泄露、客开数据覆盖等问题,主要应用于浪潮海岳智能ERP、PaaS平台等产品,不仅能对代码进行审查,还能针对交付物进行……

    时间:2024-03-20 17:43:38
  • 宜宾市南溪区信访局组织开展 《信访工作条例》知识竞赛

    5月23日下午,为深入学习宣传贯彻《信访工作条例》(以下简称《条例》),切实提升信访工作质效,提高信访干部信访知识水平,宜宾市南溪区信访局在《条例》实施一周年之际组织全体机关干部开展《信访工作条例》……

    时间:2023-05-29 17:16:04
  • 浪潮云一成果获评山东电子学会“国际领先”水平认定

    近日,浪潮云提报的“基于闪存阵列的软硬件协同高效分布式存储系统”顺利通过山东电子学会科技成果评价,荣获“国际领先”水平认定,充分体现了浪潮云在分布式智能云领域卓越的技术积累与创新成果。 随着AI训练、……

    时间:2025-12-25 11:00:16
  • 浪潮通软受邀出席山东省数字经济“百城牵手万项”活动首站

    近日,由山东省工信厅等部门联合主办的山东省数字经济“百城牵手万项”活动首站在莒县举办。浪潮通软受邀出席,分享了浪潮海岳在助力企业数字化转型方面的实践经验。 此次活动以“数融百城 数赋万项”为主题……

    时间:2023-08-02 12:04:43
随机推荐