精准预测!曙光XData助力陕西构建气象大数据服务平台

从上周开始,小编推送了系列关于曙光XData大数据智能引擎的内容,通过近期中标的实践案例,重点介绍了其在海量数据处理分析、数据管控、数据挖掘以及数据工程服务等方面的产品优势以及完善的服务能力。今天是该系列的最后一期,小编将为你介绍曙光XData大数据智能引擎在处理分析海量气象大数据方面的技术实力。

继珠江数码(

中标珠江数码!曙光XData数据管控能力凸显

)、广州海关(曙光XData新突破,助力广州建设智慧新海关)、中国资源卫星应用中心(让地球更易懂!曙光XData助力超大规模卫星遥感影像处理)之后,近期曙光中标陕西气象局,助力建设气象大数据服务平台,凭借高达万亿秒级的数据分析处理能力,XData大数据智能引擎得到了客户的高度认可,将进一步提高在面对海量气象数据时的预报分析能力,同时也展示了曙光在重大技术难题面前丰富的实践经验。

支撑海量气象大数据处理分析

近年来,陕西气象局围绕《全国气象发展“十三五”规划》提出的“智慧气象”发展目标,加强顶层设计和统筹协调,集合部门内外力量共同推进气象大数据云平台建设和气象大数据的众智众创应用。

该气象局大数据服务平台建设围绕“搭建平台、汇聚数据、开发应用、服务支撑”的整体构思提出了如下具体任务:搭建平台,建设气象大数据基础设施平台;汇聚数据,建设气象大数据数据资源中心;服务支撑,构建气象大数据共享服务系统。

此次中标,曙光将充分利用分布式存储、内存计算、机器学习等成熟的技术,形成统一的技术平台和结构技术规范,支撑包括数据采集、存储、整合、分析、展现、管理、开发等应用场景在内的数据全生命周期业务功能,满足其在气象数据汇聚、分布式数据存储环境、数据管理等方面的需求。

数据采集方面,可满足多源异构数据的接入需求,借助高效的数据采集工具,提供多种数据源数据的自动、手动、定时、实时推送和抓取服务,同时借助流式数据处理框架,可实现数据预处理功能,对接入数据进行格式转换、格式解析以及错误处理等预处理,实现数据存储区的采集。

数据存储方面,提供具有高可用性和扩展的分布式文件系统和NoSQL数据库,同时辅以关系数据库以支撑各类业务结构化数据、半结构化数据、非结构化数据、海量实时数据的存储和访问需求。在此基础上提供气象大数据数据分析功能,提供异构数据的离线、实时等场景的建模分析。

数据服务方面,提供特色大数据应用、交互式分析检索等应用和功能,同时为了方便对外提供数据共享服务,提供气象行业标准数据接口和标准开发接口。

此外,曙光XData大数据智能引擎高速数据分析引擎模块为曙光多年积累自主研发的高级数据检索分析模块,可提供超高检索性能,为陕西气象海量数据查询检索提供保障;运维管理体系提高系统运维效率,节约运维投入,大大提升系统稳定性和易用性。

当前,充分利用气象部门的数据规模优势,实现数据规模、质量和应用水平同步提升已成为气象业务发展的迫切之举。曙光将对XData大数据智能引擎等大数据核心技术产品进行持续迭代升级,不断满足气象乃至更多领域日益复杂的大数据服务需求。

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20181210B1E7HG00?refer=cp_1026
  • 腾讯「云+社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 yunjia_community@tencent.com 删除。

扫码关注云+社区

领取腾讯云代金券