手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 浪潮企业云首战AFAC2025金融智能大赛告捷!挑战组新秀奖助力金融业务技术拓新

    近日,2025年AFAC2025金融智能大赛在上海圆满落幕,获奖名单正式揭晓。浪潮企业云团队凭借基于Mermaid图表生成与Deepresearch思想的金融报告生成方案在1300多支参赛队伍中脱颖而出,成功斩获智能体赋能的金融多……

    时间:2025-08-28 16:14:51
  • 宜宾市江安县信访局党支部开展清廉家风建设主题党日活动

    江安县信访局党支部率全体党员干部到南溪区月亮湾廉洁文化基地开展了 “厚植家风文化·涵养清廉正气 ”主题党日活动。 好家风如同绵绵春雨,滋养着心灵。在廉洁文化基地讲解员的带领下,全体党员干部参观学习了……

    时间:2023-07-26 14:19:25
  • 浪潮云海若区块链OpenIBC荣获“OSCAR 尖峰开源项目及开源社区”奖

    近日,“2024 OSCAR 开源产业大会”在北京成功举行。会上,多项重要成果正式发布,浪潮云海若区块链(以下简称 OpenIBC)在此次大会上表现卓越,不仅通过了可信开源项目成熟度能力测评和可信开源社区成熟度能力测……

    时间:2024-10-29 09:34:23
  • 教育科研智能云丨全栈能力+权威资源,打通高校数智化最后一公里

    随着云服务与人工智能等先进技术的飞速发展,教育行业迎来了全新的变革机遇。中共中央、国务院印发的《中国教育现代化2035》中提出,要“加快信息化时代教育变革。建设智能化校园,统筹建设一体化智能化教学、管……

    时间:2025-07-25 12:03:10
  • 张帆获评“数字经济领军人才”:Data+AI驱动数据要素价值释放,赋能山东数字

    日前,山东省数字经济学会正式公示2025年度科学技术奖获奖名单。作为浪潮卓数大数据、北方健康与天元征信的董事长,张帆入选“数字经济领军人才”。 在山东省大力推进国家数据要素综合试验区……

    时间:2025-12-23 21:33:33
  • 全国旗舰店!永辉超市开出全国面积最大“学习胖东来”调改店

    1月15日,位于福州市海峡奥体中心商业广场的永辉超市奥体店经过50余天的闭店调改,重新恢复营业,这是永辉在全国占地面积最大的“学习胖东来”自主调改店,定位全国旗舰店,门店调改由胖东来天使城工程团队全程参……

    时间:2025-01-16 08:25:06
  • 2024年“浪潮卓数杯”第三届山东省大数据职业技能竞赛来了!

    近日,山东省人力资源与社会保障厅下发通知,组织开展2024年山东省“技能兴鲁”职业技能大赛,浪潮卓数大数据申报的“全省大数据职业技能竞赛”通过审定,连续三年获批主办这一省级赛事。 近年来,山东省持续……

    时间:2024-07-12 16:47:21
  • 祁县农商银行举行主题演讲比赛

    为进一步提升合规管理质效,厚植经营发展根基,助推祁县农商银行高质量发展,全面营造人人讲合规、事事重合规、处处倡合规的合规文化氛围,9月20日,祁县农商银行举行了“我的合规我负责,你的合规我有责”主题演……

    时间:2024-09-26 17:59:42
  • 海若技能大揭秘丨城轨智能运维背后的黑科技

    我国城市轨道交通产业历经多年发展,已经形成了配套完整、设备先进、规模经营的集研发、设计、制造、试验和服务于一体的轨道交通装备制造及智能化系统研发体系。但伴随着城市轨道交通产业规模高速发展,总体运营……

    时间:2024-07-23 11:12:31
  • 张帆出席第十四届智慧城市与智能经济博览会

    9月7日,在第十四届智慧城市与智能经济博览会-宁波“数创港”数据要素创新发展交流活动上,宁波金投集团、宁波通商集团、浪潮卓数大数据举行三方签约仪式,宣布成立宁波甬金通数据科技有限公司,现场发布由其建设……

    时间:2024-09-09 08:11:19
随机推荐