您好,欢迎来到九壹网。
搜索
您的当前位置:首页一种基于SPARK的分布式空间数据存储计算方法[发明专利]

一种基于SPARK的分布式空间数据存储计算方法[发明专利]

来源:九壹网
专利内容由知识产权出版社提供

专利名称:一种基于SPARK的分布式空间数据存储计算方法专利类型:发明专利

发明人:乐鹏,上官博屹,吴昭炎申请号:CN201810530638.4申请日:20180525公开号:CN108804602A公开日:20181113

摘要:本发明公开了一种基于SPARK的分布式空间数据存储计算方法,在复用传统地理信息系统软件功能的基础上,运用云计算软件,为空间数据的存储与计算带来高性能和高可用,实现方式包括以顾及空间范围的变长GeoHash编码为空间索引,在HBase上实现兼容多种空间数据类型的分布式空间数据存储表结构;使用MapReduce方法将存储空间数据的文件转换为HBase对应的存储格式HFile,实现分布式空间数据的快速预处理及入库;利用变长GeoHash编码对HBase中存储的空间数据进行空间范围粗检索;将从HBase中获取的空间数据映射为SPARK中的分布式空间弹性数据集对象;复用传统地理信息系统软件功能实现分布式空间弹性数据集的分布式空间数据处理接口,对空间范围粗查询到的空间数据集进行精筛选和分布式计算。

申请人:武汉大学

地址:430072 湖北省武汉市武昌区珞珈山武汉大学

国籍:CN

代理机构:武汉科皓知识产权代理事务所(特殊普通合伙)

代理人:严彦

更多信息请下载全文后查看

因篇幅问题不能全部显示,请点此查看更多更全内容

Copyright © 2019- 91gzw.com 版权所有 湘ICP备2023023988号-2

违法及侵权请联系:TEL:199 18 7713 E-MAIL:2724546146@qq.com

本站由北京市万商天勤律师事务所王兴未律师提供法律服务