典型文献
面向海量空间数据的分布式距离连接算法
文献摘要：
空间距离连接是空间数据分析最基本的操作之一,具有广泛的应用场景.针对现有分布式方法的空间域选取过大、数据倾斜、自连接较慢的问题,提出了一种新的面向海量空间数据的分布式距离连接算法JUST-Join.首先,JUST-Join仅选取必要的空间区域作为全局域,能够提前过滤数据,减少无效的数据传输和不必要的计算开销;然后,同时考虑了参与连接的两个数据集的分布,从而缓解了数据倾斜问题;最后,针对自连接情形的冗余计算,采用平面扫描算法来进一步提高效率.文中使用Spark实现了JUST-Join算法,并利用真实的数据集做了大量实验.实验结果表明,JUST-Join算法在效率和扩展性方面都优于现有的最先进的分布式空间分析系统.
文献关键词：
空间距离连接;空间分区;分布式计算;空间索引;时空数据
中图分类号：
作者姓名：
王如斌;李瑞远;何华均;刘通;李天瑞
作者机构：
西南交通大学信息科学与技术学院 成都 611756;京东智能城市研究院 北京 100176;重庆大学计算机学院 重庆400044;上海大学计算机工程与科学学院 上海200444
文献出处：
引用格式：
[1]王如斌;李瑞远;何华均;刘通;李天瑞-.面向海量空间数据的分布式距离连接算法)[J].计算机科学,2022(01):95-100
A类：
空间距离连接
B类：
向海,空间数据,空间域,较慢,JUST,Join,空间区域,局域,数据传输,不必要,计算开销,冗余计算,面扫描,提高效率,Spark,扩展性,最先,空间分析,空间分区,分布式计算,空间索引,时空数据
AB值：
0.339649
相似文献
机标中图分类号，由域田数据科技根据网络公开资料自动分析生成，仅供学习研究参考。
