基于天擎的省级非结构化数据服务和存储分析OA
文章针对省级气象大数据云平台(天擎)中非结构化资料服务与存储问题展开研究,旨在解决因文件索引与实体存储不一致导致的资料获取失败、存储资源利用率过高等问题,以提升平台资料管理的规范性与服务效率。研究基于气象元数据与血缘关系,综合运用数据库技术,通过基于时序的轻量I/O并行校验、差异化时间范围筛选等方法,系统分析了非结构化资料的存储现状、月增量特征及资料服务中的异常情况。结果表明,天擎中存在资料类别不一致、存储位置变更、新旧资料更替、异常测试资料及数据目录异常五类问题;在存储分布上,数值模式、卫星及雷达资料占比较高,其中部分资料的月增量显著。基于数据服务状态分析和存储分析,依据省级资料分布和增量特征优化存储策略,促进气象大数据云平台业务应用中气象资料的规范化管理与高效服务。
张卫卫;许竹霞;付杰;徐娟
甘肃省气象信息与技术装备保障中心,甘肃兰州730020甘肃省气象信息与技术装备保障中心,甘肃兰州730020甘肃省气象信息与技术装备保障中心,甘肃兰州730020甘肃省气象信息与技术装备保障中心,甘肃兰州730020
信息技术与安全科学
天擎非结构化资料NAS存储优化元数据血缘关系
《现代信息科技》 2026 (14)
P.92-95,101,5
甘肃省联合科研基金项目(25JRRA1116)甘肃省气象局气象科学技术研究项目(Ms2025-A-3)甘肃省气象信息与技术装备保障中心科技创新基金项目(Ms202402)甘肃省气象信息与技术装备保障中心科技创新基金项目(XXZXZd202601)。
评论