手机版

浪潮云湖大数据平台:多模大数据存算,助力政企数字化转型

时间:2023-08-29 15:19:36作者:马慧思来源:互联网

中共中央、国务院办公厅印发的《全国一体化政务大数据体系建设指南》提出:“加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动”。运用大数据技术实现数据流转赋能,助力政企数字化转型,营造良好数字生态逐渐成为行业发展共识。

拥抱数据新要素 打造云湖大数据平台

在新要素方面,浪潮云以数据为核心,秉持“数据优先”原则,围绕“数采-数算-数用”的全生命周期数据服务支撑能力,打造浪潮云湖大数据平台,提供开箱即用、易扩展,连接 OLAP 和数据湖等众多框架的多模大数据存储计算平台,致力于流批一体和湖仓一体的探索与实践。

浪潮云湖大数据平台以数据驱动业务为目标,打通各部门数据壁垒,进行全量、多源异构数据汇聚与存储,支持构建原始库、标准库、主题/专题库、共享库等数据资源中心,赋能政企数字化转型。

多源异构大数据存储 实时数据秒级响应

浪潮云湖大数据平台作为通用的数据存储与计算产品,提供多源异构数据统一入湖、入湖数据统一分析处理优势能力,具备核心读写性能提升,拥有容错灾备能力、高并发、灵活扩展的分布式架构,支持实时采集和离线采集等企业级增强功能。

核心读写性能提升:CPU每秒数万记录处理能力,测试性能较开源提升2倍左右,同时API和社区保持完全兼容。通过优化平台参数并调优,对大量的业务数据进行读写、更新等数据流转、赋能操作,满足客户需求并取得良好的运行情况和性能。

自定义报警管理:通过配置邮件、企业微信等途径进行及时告警,智能诊断快速定位问题。其中邮件告警支持开启邮箱验证、启动TLS证书验证、开启SSL验证等能力;展示方式支持文本、表格、附件等形式。企业微信告警支持“应用”和“群聊”两种报警方式、markdown和文本两种展示方式。

一站式作业运维:支持作业实例一键式可视化上线、下线操作,全生命周期、运行模式等多维度作业实例检索与展示。提供作业总览、集群信息、作业快照、异常信息、数据血缘、历史版本、告警记录等全生命周期的作业运维能力。

可视化作业开发:一站式开发管理平台,包括丰富的StreamSQL在线分析能力和内置多个领域函数库,并可按需自定义函数。提供作业配置、作业信息、历史版本、SQL格式化和SQL 检查、实时查看执行信息、执行结果和执行历史记录等能力,包括多版本作业代码比较和回滚,并支持一键式作业发布和下线功能。

流批一体数据解决方案 助力政企数字化转型

离线数据分析:把互联网、Web 应用、手机 App 等业务服务器上的海量日志同步到浪潮云湖大数据平台的数据节点或 OSS 后,使用 Hive、Spark、Presto 等主流计算框架快速获取数据洞察力。使用 NiFi 等工具加载分散于RDS 或其他存储引擎的数据,并把分析后的数据同步到 RDS,为数据可视化产品提供数据支撑。

流式数据分析:通过 API、SDK 把位于业务服务器上实时产生的数据推到 Kafka 消息中间件之后,可在浪潮云湖大数据平台产品中选择合适的流式数据处理引擎来分析数据,以实现对业务变动的实时告警;还可以把分析结果实时同步到 RDS 等存储引擎,以便于通过数据可视化产品对业务状态进行实时可视化检测。

浪潮云湖大数据平台适用于数据流转交换、实时数据数仓、实时数据分析、实时大屏、数据血缘溯源等多种业务场景,目前已经形成了覆盖数字政务、通信、税务、健康医疗、互联网+等多个行业的数据落地场景,助力政企客户开拓业务新模式。

未来,浪潮云将持续提升基于多源融合、高效读写、流批一体的大数据底座支撑能力,加强数据汇聚融合、共享开放和开发利用,促进数据依法有序流动,赋能数字经济、数字社会、数字生态高质量发展。

推荐阅读

  • 浪潮云启操作系统生态适配平台重磅发布,共建创新产业生态新未来

    3月19日,浪潮云重磅推出“云启操作系统生态适配平台”,该平台以浪潮云启操作系统(InLinux)为核心,全面支撑传统关键业务与云计算、大数据、人工智能、区块链、大模型等创新场景的融合发展,促进产业链上下游伙……

    时间:2025-03-27 10:22:11
  • 海若大模型擦亮黑龙江数字政府“新名片”

    从数据的高效检索到数据指标的智能分析,从政府公文的智能化写作到政府政策的智能问答,政务数据与智能技术的创新融合,正让数字政府建设迸发无限能量。 在过去的工作中,每一个数据集的构建和每一个数据需求……

    时间:2024-10-09 16:32:00
  • 长宁县委书记徐创军主持召开招商引资工作调度会

    近日,县委书记徐创军主持召开招商引资工作调度会,分析今年以来招商引资工作推进情况,安排部署下阶段招商引资重点工作。他强调,要强化主人翁意识,扛牢职责使命,保持发展定力,全力推动招商引资工作取得新成……

    时间:2023-06-28 13:37:17
  • 第八届数字中国建设峰会丨浪潮云启操作系统(InLinux)精彩亮相

    近日,第八届数字中国建设峰会在福州开幕,作为我国数字经济领域最具影响力的盛会之一,来自政府、各行业专家及领军企业代表齐聚一堂。峰会期间,“有云处皆智能”2025数智赋能创新发展主题会议成功召开,浪潮云携……

    时间:2025-05-06 09:41:49
  • 破解康养产业“质效双升”的密码

    ——评《康养产业服务质量与供应链优化》 在人口结构深度转型与健康中国战略叠加推进的时代背景下,《“十四五”国民健康规划》明确提出“推进健康相关业态融合发展”“壮大健康新业态、新模式”的顶层设计,标志着康……

    时间:2025-02-17 16:58:34
  • 港澳台大学生代表到长宁县开展文化交流活动

    7月22日,共青团宜宾市委、宜宾“两海”示范区管委会邀请19名港澳台大学生代表和6名在宜高校大学生代表,走进蜀南竹海景区开展文化交流活动。 在蜀南竹海,学生们在翡翠长廊感受竹生态,在蜀南竹海博物馆,学习……

    时间:2023-07-26 14:36:04
  • 虹口有数丨上海市虹口区“一网统管”新解法

    全面推进城市数字化转型是践行“人民城市人民建,人民城市为人民”重要理念,巩固提升城市核心竞争力和软实力的关键之举。为深入贯彻落实网络强国、数字中国、智慧社会战略部署,上海市发布了《上海市全面推进城市……

    时间:2023-09-26 16:13:44
  • AI赋能粮食安全,2025华粮科技数智化创新峰会在京召开

    4月18日,2025华粮科技数智化创新峰会在北京召开,会议以“AI+粮食·智领未来”为主题,由华粮科技主办,邀请知名专家、央国企高管、权威机构、企业代表等百余人汇聚一堂,围绕AI大模型、智能体、机器人等热点议题……

    时间:2025-04-21 15:31:44
  • 长宁县民宗局学习传达《四川省食品安全条例》

    为进一步规范全县宗教活动场所食品安全工作,强化食品安全意识,近日,长宁县民宗局组织召开宗教界食品安全专题培训会,全县8个宗教活动场所负责人参加。 会议详细解读了《四川省食品安全条例》,并结合长宁实际……

    时间:2023-09-20 16:43:05
  • 夯实大模型“分布式算力底座” 浪潮云参编标准正式发布

    近日,Q/KXY TEI-DCIC-2024《分布式云服务能力要求 智算平台》以及边缘智能系列等多项标准正式发布。浪潮云作为主要参编单位,深度参与本次标准制定,并结合自身在云计算、大数据等领域的研究成果及实践经验积累……

    时间:2024-06-12 14:42:51
随机推荐