钟运琴,方金云,赵晓芳.大规模时空数据分布式存储方法研究[J].高技术通讯(中文),2013,23(12):1219~1229 |
大规模时空数据分布式存储方法研究 |
|
|
DOI: |
中文关键词: 云平台,空间应用,数据管理,时空数据存储,时空索引,时空数据缓存 |
英文关键词: |
基金项目: |
作者 | 单位 | 钟运琴 | 中国科学院计算技术研究所;中国科学院大学 | 方金云 | 中国科学院计算技术研究所 | 赵晓芳 | 中国科学院计算技术研究所 |
|
摘要点击次数: 3693 |
全文下载次数: 3204 |
中文摘要: |
提出了一种基于Hadoop云平台的时空数据分布式存储方法,以应对空间应用中出现的无法满足高并发用户在线实时访问和空间信息服务中断等大数据存储瓶颈问题。该方法运用时空数据切分与布局机制使数据均匀分布于集群中以确保存储与访问负载均衡;运用时空对象重组织机制提高数据的时空临近性以匹配时空应用存取模式;运用热点时空对象分布式缓存机制以降低磁盘I/O访问延迟。利用该方法实现了基于Hadoop云平台的时空数据分布式存储中间件原型系统exHDFS,实验结果表明该方法能高效地满足数据密集型空间应用存储需求。 |
英文摘要: |
|
查看全文
查看/发表评论 下载PDF阅读器 |
关闭 |
|
|
|