| 基于Hadoop的气象数据分布式存储技术研究 |
| |
| 引用本文： | 周笑天,冯勇,陈益玲,陈澍. 基于Hadoop的气象数据分布式存储技术研究[J]. 信息技术, 2022, 0(1): 68-74 |
| |
| 作者姓名： | 周笑天 冯勇 陈益玲 陈澍 |
| |
| 作者单位： | 山东省气象信息中心 |
| |
| 基金项目： | 山东省气象局面上课题(2018sdqxm06)。 |
| |
| 摘 要： | 针对目前气象数据存储所面临的海量扩张、高并发读写、结构化和非结构化数据并存以及长时间序列和大数据集检索效率低下等问题,提出了以Hadoop开源框架为基础的气象数据分布式存储方案.通过对气象数据自身属性和特点进行分析,得出了气象数据在经过充分优化的基础上,在分布式存储框架中具有很强的适应性和规模化应用的潜力;并在HBas...
|
| 关 键 词： | 气象数据存储 Hadoop Row Key 文件合并 |
Research on distributed storage technology for meteorological data based on Hadoop |
| |
| ZHOU Xiao-tian,FENG Yong,CHEN Yi-ling,CHEN Shu. Research on distributed storage technology for meteorological data based on Hadoop[J]. Information Technology, 2022, 0(1): 68-74 |
| |
| Authors: | ZHOU Xiao-tian FENG Yong CHEN Yi-ling CHEN Shu |
| |
| Affiliation: | (Shandong Provincial Meteorological Information Center,Jinan 250031,China) |
| |
| Abstract: | |
| |
| Keywords: | meteorological data storage Hadoop Row Key merging of files |
| 本文献已被 维普 等数据库收录！ |
|
