手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 圣拉帕妮音疗鉢梅州文化传播中心启动仪式在世界客都梅州圆满举行!

    2023年11月9日,世界广东梅州客天下明月岛花团锦簇、彩旗招招……圣拉帕妮音疗钵梅州文化传播中心开业盛典在这里隆重举行。 圣拉帕妮音疗创始及传承人张洁女士及行政总裁白雪、教培总监安娜与梅州市女企业家……

    时间:2023-11-16 18:04:56
  • 2023云边协同大会丨浪潮云斩获多项大奖 构建云边一体算力服务能力

    6月30日,由中国信息通信研究院、中国通信标准化协会主办的第三届“云边协同大会”在北京举行。本届大会以“云智物联,边筑算新”为主题,聚焦分布式云、边缘计算、AIoT平台等领域前沿焦点,发布技术创新与最佳实践……

    时间:2023-07-03 10:06:29
  • 人民数据与北京中科华夏控股有限公司、中视购物有限公司达成战略合作

    8月18日,人民数据管理有限公司与北京中科华夏控股有限公司、中视购物有限公司正式签署三方战略合作协议。中科华夏控股有限公司总经理吴书永、董事张帅、中视购物商务总监高玉涛及人民数据相关负责人共同出席签……

    时间:2025-08-22 08:17:31
  • 只要有需要,我时刻做好救援的准备

    ——记雄安新区一位普通的汉子刘娇宾 刘娇宾,今年四十三,雄安新区漾堤口村人,靠货车运输维持生计,长年的奔波,使得面容黝黑,人显得比实际年龄要苍老许多。刘娇宾师傅打小就性格豪爽、热心助人,老乡……

    时间:2023-08-17 15:06:39
  • 绿色发展、链条构建——山东万牧农业科技 循环产业园引领农牧循环养殖新潮流

    走进郯城县花园镇的山东万牧农业科技循环产业园,只见一排排高标准养殖圈舍整齐划一,宽阔的厂房、先进的设备,一群群肉羊膘肥体壮、一只只兔子憨态可掬。养殖工人们穿梭在圈舍中,喂食、清扫、消毒……一切忙而有……

    时间:2024-08-20 09:51:44
  • 海若技能大揭秘丨会“写公文”的海若大模型

    东汉荀悦所撰《汉纪·武帝纪》云:“苞苴盈于门庭,聘问交于道路,书记繁于公文,私务众于官事,于是流俗成矣,而正道坏矣。”是迄今所见关于公文的最早记载。 在长达一千多年的历史长河中,公文以其权威性和明……

    时间:2024-06-24 17:13:03
  • 浪潮云受邀出席2023CCF中国软件大会

    12月1日,以“智能化软件创新推动数字经济与社会发展”为主题的2023CCF中国软件大会在上海成功召开,本次大会由中国计算机学会(CCF)主办,浪潮云作为全国信息技术标准化技术委员会/云计算工作组(SAC/TC28/WG20……

    时间:2023-12-08 14:14:44
  • 感恩同行四十载!2026浪潮数字企业客户创享会暨企业AI体验之旅成功举办

    8月20日,“携手同行,共赴海岳”2026浪潮数字企业客户创享会暨企业AI体验之旅成功举办。本次活动重点邀约携手多年的老客户,以主题论坛、产品体验、标杆游学为载体,共探人工智能时代下数智化转型合作新机遇,深……

    时间:2026-08-21 10:24:29
  • 揽获“数据要素×”大赛多项大奖,浪潮企业云以“云+AI”赋能产业创新

    近日,2025年“数据要素×”大赛各赛区赛事圆满收官。大赛由国家数据局联合中央网信办、工业和信息化部等20多个部委及机构共同发起,以“数据赋能 乘数而上”为主题,聚焦数据要素在工业制造、现代农业、医疗健康等13……

    时间:2025-10-28 11:07:10
  • 浪潮云亮相2025沙特LEAP科技展,深化中东数字化合作新篇章

    近日,浪潮云受邀参加在沙特阿拉伯首都利雅得举办的LEAP 2025科技展。作为中东地区最具影响力的科技盛会,LEAP 2025吸引了来自全球的科技公司、政府机构、企业客户及行业专家,聚焦云计算、人工智能、大数据等关……

    时间:2025-04-01 12:55:40
随机推荐