手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 获评一等奖、入选创新成果100强!浪潮海岳亮相2023中国国际数字经济博览会

    9月6日-8日,2023中国国际数字经济博览会在石家庄举办。大会期间,浪潮海岳受邀出席人工智能驱动产业数字化创新发展论坛、产业链供应链数字化转型论坛,浪潮海岳智慧供水云平台获评由大会组委会颁发的“新模式”创……

    时间:2023-09-13 09:29:25
  • 「mophie」让磁吸尽享轻薄

    ———————————————— 告别笨重和低效 技术发展是为了让人更好的掌控时间 而不是成为时间的仆人 在现代的 快节奏时代 我们总是在匆匆忙碌的路上 手机闪烁的的消息提醒 电子支付提示音……

    时间:2023-07-26 13:34:56
  • “翔跑就跑”2026厦门10天10夜超跑节骐骥开跑

    2026年2月28日上午,厦门奥林匹克体育中心(白鹭体育场毗邻)的芭乐鱼营地“2026厦门10天10夜超跑节”在马年新春鸣笛开跑。一场持续240小时、跨越元宵佳节的亚洲超马史诗,由此拉开帷幕。 一、骐骥齐聚……

    时间:2026-03-02 13:15:42
  • 制创新机 链就未来—2024年东盟与中日韩(10+3)先进制造业云上对接会在南宁举办

    【△2024年东盟与中日韩(10+3)先进制造业云上对接会 会议现场 广西贸促会 摄】 合则立,合则惠,合则兴,至上之合,共生共赢。为贯彻落实党中央、国务院稳外贸稳外资政策部署,促进国内国际“双循环”,推动……

    时间:2024-08-14 17:30:41
  • 张帆荣膺“2023中国数据英雄”!

    8月3日,国内大数据产业领域权威盛会大数据与数字经济大会暨2023(第八届)中国大数据产业生态大会在北京召开。浪潮卓数大数据董事长张帆应邀出席开幕式并作主旨演讲;同时,凭借在大数据领域的行业领导力和产业……

    时间:2023-08-04 09:47:29
  • 浪潮海岳大模型智能填单助手:人机协作,加速实现智能自动化

    随着新一轮科技革命和产业变革深入发展,以大模型为代表的新一代人工智能技术在企业中的应用逐渐深化,通过“大模型”与“应用”融合,加速智能化自动化场景落地,成为企业数智化转型升级的重要方向。 业务数据录……

    时间:2024-11-12 14:13:54
  • 浪潮数字企业应邀参加中国总会计协会咨询分会论坛

    近日,以“践行价值创造与财务管理变革”为主题的“中国总会计师协会咨询分会2023年论坛暨2022-2023年度课题成果发布会”在北京举办。浪潮数字企业应邀参会,并作“电子凭证单套制报销入账归档流程研究”主题报告。 ……

    时间:2023-06-12 10:18:21
  • 夯实浪潮数据云产品能力 | 云集物联感知平台全新升级

    为践行数据云业务战略,浪潮云围绕 “数采-数算-数用”的数据价值链与流通,夯实浪潮数据云产品能力,全新升级发布“云集物联感知平台”,实现亿万设备连接、全域全量、多源异构的数据采集。 云集物联感知平……

    时间:2023-05-08 09:25:04
  • 【浪潮星锐】唐晓东:于云端启航,勇做创新路上的“奔跑者”

    在工程师的眼中,键盘的敲击声代表着独特的浪漫,一行行代码,见证他们的蜕变与成长,铸就了不一样的精彩人生。 “为什么想做技术研发,可能因为从小是‘网瘾’少年吧,高考后果断选择了软件工程专业,可以理所……

    时间:2025-03-05 10:39:54
  • 海若技能大揭秘丨会“写公文”的海若大模型

    东汉荀悦所撰《汉纪·武帝纪》云:“苞苴盈于门庭,聘问交于道路,书记繁于公文,私务众于官事,于是流俗成矣,而正道坏矣。”是迄今所见关于公文的最早记载。 在长达一千多年的历史长河中,公文以其权威性和明……

    时间:2024-06-24 17:13:03
随机推荐