手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 浪潮云成功入选2025年度山东省数字经济创新平台

    近日,山东省工业和信息化厅公布2025年度山东省数字经济创新平台名单,浪潮云凭借“人工智能工厂”这一典型创新实践,在评选中脱颖而出,入选“2025年度数字经济创新人才基地名单”。 为贯彻国家数字经济发展战略……

    时间:2025-11-13 14:34:30
  • 关注民生热点 守护电梯安全 聚焦电梯执法办案技巧探讨

    近日山东省临沂市市场监管综合执法支队分管领导带队前往临沂市电梯行业协会开展专项调研交流活动,聚焦现阶段电梯维保工作存在的突出问题展开讨论。协会及参会维保单位人员围绕当前我市电梯维保工作的现状、现阶……

    时间:2023-11-15 15:15:10
  • 会计专业大专生可以考什么证(大专生可以考会计证吗)

      大专能考ACCA吗?学ACCA能获得哪些证书?接下来就让高顿学姐为大家解答一下吧!   一、ACCA的报考条件   报名注册ACCA学员,具备以下条件之一即可:   1、教育部认可的高等院校在校生(本科在校),顺利完……

    时间:2023-01-06 22:42:08
  • 全国行业职业技能竞赛数据库运行管理员赛项预赛成功举办

    11月30日,2023年全国行业职业技能竞赛——第二届全国工业经济应用创新职业技能竞赛数据库运行管理员赛项预赛在山东商务职业学院成功举办,经过激烈角逐,比赛最终产生一等奖9名、二等奖13名、三等奖22名。 ……

    时间:2023-12-01 12:18:54
  • 长宁县委统战部专题学习《乡村振兴责任制实施办法》

    2月8日上午,县委统战部组织全体机关干部召开专题会议,集中学习《乡村振兴责任制实施办法》,会议由统战部常务副部长罗毅主持。 会议认真学习了《乡村振兴责任制实施办法》(简称办法)全文,深刻领会党……

    时间:2023-02-14 11:05:05
  • 市委统战部副部长杨学东率队调研 长宁县民族宗教工作

    2月13日,市委统战部副部长、民宗局局长杨学东一行深入长宁县督导调研民族宗教工作。县委统战部常务副部长罗毅、县委统战部副部长、县民宗局局长张学元等有关负责人陪同调研。 调研指导组先后来到长宁县……

    时间:2023-02-14 14:09:46
  • 《森林草原火灾监测技术规范》研讨会圆满召开!

    2023年9月25日,由中国林业产业联合会提出并归口,由中国科学技术大学主编,中航金城无人系统有限公司、上海华测导航技术股份有限公司、中林信达(北京)科技信息有限责任公司、北京英特威视科技有限公司、……

    时间:2023-09-27 08:39:30
  • 全国首个!济南公共数据可信流通基础设施落地

    近日,全国首个公共数据可信流通基础设施以试点服务项目形式在济南正式落地,标志着济南市公共数据全面实现社会化流通,“数据要素×”行动将在济南市实现全新突破。 推动数据要素“供得出、流得动、用得好”,发……

    时间:2024-04-15 10:47:57
  • 宜宾:省、市领导调研筠连县“万企兴万村”行动

    4月24日,省总工会党组书记、副主席宋开慧,省总工会党组成员、副主席苗勇,省人社厅二级巡视员陈泉,市委常委、统战部部长、市总工会主席陶学周等省、市领导一行莅临筠连出席2023年四川省第四届茶行业职工职业……

    时间:2023-05-10 16:44:09
  • 海若・上善水利大模型与DeepSeek融合创新之路

    在大力推进数字孪生水利建设以及人工智能技术加速发展的背景下,浪潮云在水利部信息中心“上善”水利大模型开源框架上,打造全国首个生产级水利行业大模型簇——海若・上善水利大模型。 在数字孪生水利建设中,海……

    时间:2025-03-27 15:46:34
随机推荐