手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 构建高效数据生态,赋能业务创新发展 ——保定市深入开展数据归集行动

    数据是国家基础战略性资源和重要生产要素。加快构建全国一体化大数据中心协同创新体系,是贯彻落实党中央、国务院决策部署的具体举措。政府部门间、政企间数据壁垒进一步打破,数据资源流通活力的增强,对全国一……

    时间:2024-10-16 15:07:44
  • 【宜宾】长宁县首次在第二十一届海科会上成功签约

    2023年9月11日,第二十一届中国西部海外高新科技人才洽谈会(以下简称海科会)开幕式暨天府论坛在成都世纪城国际会议中心五层水晶厅举行。在海外人才和项目引进签约仪式上,长宁县公用事业服务公司与金科智慧服……

    时间:2023-09-13 17:06:05
  • 两会听“潮”声 | 人工智能+粮食安全,华粮科技加速赋能粮食行业新质生产力

    3月5日,十四届全国人民代表大会第三次会议在北京隆重开幕。2025年政府工作报告明确提出,要持续增强粮食等重要农产品的稳产保供能力,全方位夯实粮食安全根基。同时,强调要持续推进“人工智能+”行动,激发数字……

    时间:2025-03-10 10:24:23
  • mophie 告诉你 :在充电过程中「快充设备」发热发烫是否正常?

    处在三伏天中,人们皆苦炎热; 那在充电过程中「充电器与手机设备发热发烫」是否存在隐患呢? 要知道天气炎热时,外界温度过高,热传递会导致手机设备发烫; 不过呢,目前众多手机厂商都为手机加上了「……

    时间:2023-08-04 08:49:03
  • 关于启动“XR企业TOP100评价工作”申报的通知

    各相关单位: 扩展现实(XR)是虚拟现实(VR)、增强现实(AR)和混合现实(MR)等沉浸式技术的总称。《十四五规划和2035年远景目标纲要》明确将“虚拟现实和增强现实”列入数字经济重点产业,提出以数字化转型……

    时间:2023-06-14 16:41:16
  • 2023年石景山区科技工作者日主场活动盛大启幕

    科技是国家强盛之基,创新是民族进步之魂。科技工作者既是科技创新的主体,也是科学普及的主导力量。5月26日,由北京市科协指导,石景山区科协、区委组织部、区科委、中关村石景山园管委会共同主办,中关村数智……

    时间:2023-05-28 21:36:45
  • 全民健康事业新篇章,企协共创营养优选品牌

    5月14日,在全国各地正在开展“全民营养周”活动的特别时刻,厦门站的“全民营养周”启动仪式在厦门资深生鲜供应链公司一亩鲜生位于集美侨英路317号全新开业的会员体验中心举办。 以此为契机,一亩鲜生推出了……

    时间:2023-05-15 08:56:50
  • 国庆超马,6天6夜,最长的超级马拉松将在十一长假开跑

    8月10日第三届厦门6天6夜超级马拉松在厦门市翔安区初心馆启动发布定档。将在2024年10月1日-10月7日在新圩面前埔三五丘农业公园举办。此前在2023年举办第二届赛事创造850公里的亚洲最好成绩纪录并成为国际超……

    时间:2024-08-13 15:43:11
  • 数据云说 | 浪潮云练飞:数据云企业侧实践分享

    在数据浪潮澎湃而来的今天,基于数据空间的海量数据可信自由流动,正推动中国向“数据强国”全速前进。为此,浪潮云以数据为核心,围绕业务场景,推出数据云,打造以“云网边端”为支撑的分布式数据云体系,成为支撑……

    时间:2023-12-29 09:45:31
  • 2023未来数字生产力荣誉揭晓!浪潮云斩获十余项大奖

    12月19日,2023数字生态产业峰会暨第十六届信息主管年会在北京顺利召开,会议旨在为我国城市数字化转型中的智能应用与可持续发展提供方向指引。会议期间,2023 未来数字生产力创新年度评选颁奖仪式同步举行,浪……

    时间:2023-12-20 10:42:14
随机推荐