手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 浪潮云海若区块链社区版OpenIBC宣布正式开源

    近日,以“开源赋能产业,生态共筑未来”为主题的2024开放原子开源生态大会在北京落下帷幕。期间,浪潮云正式宣布开源海若区块链社区版OpenIBC(简称:OpenIBC)并捐赠给开放原子开源基金会。 大会期间,浪……

    时间:2024-10-23 16:11:40
  • 筠连县知联会召开2023年第一次理事会议暨会长(扩大)会议

    4月20日,筠连县知联会召开2023年第一次理事会议暨会长(扩大)会议,县知联会会长黄钧主持会议,县委统战部分管副部长、县台办主任田定国出席会议。县知联会副会长、秘书长、副秘书长、常务理事、理事参加会议……

    时间:2023-05-10 16:41:29
  • 四川国旅高新第二分社是一家专注于旅游市场的企业

    四川国旅高新第二分社旅游专线是一个以特色旅游为主打的品牌,致力于为广大游客提供独特、精彩的旅行体验。我们将通过品牌定位、目标受众、渠道推广、内容营销和数据分析等方面来实现市场营销目标。 品……

    时间:2023-07-06 17:45:00
  • 浪潮企业云|新希望金融科技加入云帆联盟,金融智能云筑牢AI原生银行底座

    在人工智能与云计算迅猛发展的今天,“云帆联盟”正以“技术共享、场景共建、成果共用”的开放理念,汇聚产业力量,共创智能新生态。作为联盟重要成员,成都新希望金融信息有限公司(以下简称“新希望金融科技”)持续……

    时间:2025-09-28 10:41:23
  • 杭州通用人工智能发展论坛大模型安全可信分论坛成功召开

    2023年5月31日上午,由中国信息通信研究院(以下简称“中国信通院”)、 中国人工智能产业发展联盟主办的,人工智能关键技术和应用评测工信部重点实验室、可信人工智能推进计划承办的杭州通用人工智能发展论坛大模……

    时间:2023-06-12 11:14:35
  • 天元征信获评2022年度山东省大数据创新服务机构

    近日,山东省工业和信息化厅发布了《2022年度山东省大数据发展创新平台名单》,浪潮集团旗下的天元大数据信用管理有限公司(简称天元征信)入选山东省大数据创新服务机构,天元征信联合山东师范大学申报的商务大……

    时间:2023-01-30 16:04:39
  • 益企同行,浪潮海岳亮相2023全国中小企业数字化转型大会

          10月28日-30日,以“数实融合 赋能万企”为主题的2023全国中小企业数字化转型大会在合肥举行。大会期间,浪潮启动中小企业数字化转型试点城市“益企同行”计划、发布新一代中小企业智能ERP产品浪……

    时间:2023-10-30 13:23:01
  • 2023“数”你好“云”丨浪潮云数据云IBP释放数据要素1+1>2的力量

    写在前面 “数字化是一场谁都无法回避的确定性大势。过去十年,浪潮云见证我国的数字经济规模从 11 万亿增长到超过 45 万亿,稳居世界第二;参与并助力云计算、大数据等数字化基础设施逐年爆发式增长;促推千……

    时间:2023-01-13 12:29:32
  • 《商用密码管理条例》正式发布丨浪潮云打造云上密码新模式

    条例解读 2023年5月24日,中华人民共和国中央人民政府网站公开《商用密码管理条例》(以下简称《条例》)2023年修订版正式稿全文,《条例》在2023年4月14日国务院第4次常务会议修订通过,现予公布,自2023年7……

    时间:2023-06-01 12:18:44
  • 潮咖咖啡助力『淘宝闪购417骑士日』 首发告捷 勇攀中国咖啡品牌的新高峰

    4月17日,潮咖集团联合淘宝闪购于”17城市骑士日”重点项目,在上海、杭州、重庆、深圳、长沙等10个城市22个核心站点,同步落地线下”双饮品站”,为数千骑士提供咖啡奶茶1分购权益活动。此……

    时间:2026-04-18 11:42:52
随机推荐