手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 海若讲堂第二期丨浪潮云张睿智:政务大模型发展之道

    2024年1月,国家数据局等17部门联合印发《“数据要素×”三年行动计划(2024—2026年)》,推动科研机构、相关企业开展行业共性数据资源库建设,打造高质量大模型训练数据集。大模型的发展是实现“数据要素×”目标的关……

    时间:2024-06-04 09:11:59
  • 浪潮卓数大数据旗下天元征信两款产品入选山东省首版次高端软件名录

    近日,山东省工业和信息化厅公布第九批山东省首版次高端软件产品名单,浪潮卓数大数据旗下天元征信公司自主研发的的“客易得系统V1.0”和“数智金融大脑V1.0”双双入选。 首版次高端软件产品,是指山东省内企……

    时间:2025-07-04 16:27:34
  • 怡申股份:加速推进业财一体化,起航数智发展新阶段

    最近这段时间,怡申股份对公司数据管理平台升级前后的应用体验进行了对比:单说项目管理,原先统计数据需要3、4个人手工收集数据,再归拢形成领导想要的数据,基本需要2-3天,现在只通过一张报表,就可以实时查……

    时间:2024-09-04 11:13:03
  • 市场地位声明:百年医仁荣膺“中国高端非遗膏滋第一品牌”

    引言:膏滋是以中医“药食同源”理论为指导,结合个体体质与病症特点,将可食用中药材与食材通过特定工艺制成的食疗产品。作为中医药非遗技艺的重要载体,膏滋承载着“治未病”、 “药食同源”的中华养生智慧。湖南百……

    时间:2025-05-29 11:59:44
  • 即将启程!在魅力榕城解锁“数据要素×”

    推动数据要素“供得出、流得动、用得好”,发挥数据要素乘数效应,是推动高质量发展的必然要求。正如国家数据局局长刘烈宏在2024年“数据要素×”大赛启动仪式上提到,释放数据要素乘数效应,关键是在千行百业中创造……

    时间:2024-05-15 15:12:36
  • 【浪潮星锐】徐士强:以代码为剑,筑牢安全之盾

    在数字化浪潮汹涌澎湃的今天,数据已成为驱动经济社会发展的新燃料。连续四年,数据安全被写入政府工作报告,这不仅是对国家数据安全战略决心的彰显,更是数据安全在国家安全体系、经济安全屏障以及社会稳定基石……

    时间:2025-03-05 10:41:14
  • 天元征信被评为山东省2022年度创新型中小企业

    近日,山东省工业和信息化厅公示了2022年度创新型中小企业认定名单,经企业申报、各市审核评价、省级汇总复核等程序,浪潮集团旗下的天元大数据信用管理有限公司(以下简称天元征信)通过认定,正式被评为山东省……

    时间:2023-01-30 16:05:30
  • 英国监管单位认为被政府禁止的ico(英国审慎监管局)

    1月12日消息,英国反竞争监管机构正考虑阻止英伟达斥资400亿美元收购英国芯片设计公司Arm的交易,这两家公司于周二提交书面文件发起反击。他们阐述了交易应该获得批准的理由,还谴责监管机构忽视了Arm的财务状况,……

    时间:2023-01-06 22:41:46
  • 通辽市政务信息资源共享交换平台升级:强化核心功能,破解政务数据供需对接难题

    数据共享是数字政府发展的关键环节,对提高政府治理和公共服务至关重要。通辽市利用内蒙古自治区“三清单”机制,升级了“通辽市政务信息资源共享交换平台”,引入了新的供需对接系统,以提高政府部门间数据共享的效……

    时间:2024-12-25 17:52:03
  • 【宜宾】长宁县召开异地商会返乡企业家迎春座谈会

    近日,长宁县工商联(总商会)召开2023年异地商会返乡企业家迎春座谈会,县政协副主席、工商联主席、商会会长周小雨出席会议。县委统战部副部长、县工商联党组书记、常务副主席李茂主持会议,县工商联(总商会)……

    时间:2023-01-18 10:51:47
随机推荐