广域虚拟数据空间中边缘缓存系统的研究与实现

霍建同; 肖利民; 霍志胜; 徐耀文

doi:10.11959/j.issn.2096-0271.2021049

您当前的位置：

首页 >

文章列表页 >

广域虚拟数据空间中边缘缓存系统的研究与实现

专题：国产环境下的大数据处理系统 | 更新时间：2024-06-03

- 广域虚拟数据空间中边缘缓存系统的研究与实现
- Research and implementation of edge cache system in global virtual data space across WAN
- 大数据 2021年7卷第5期页码：2021049
- 作者机构：
  
  1. 软件开发环境国家重点实验室，北京 100191
  2. 北京航空航天大学计算机学院，北京 100191
- 作者简介：
  
  [ "霍建同（1985- ），男，北京航空航天大学计算机学院博士生，主要研究方向为高性能计算、分布式存储、系统安全、计算机网络等" ]
  [ "肖利民（1970- ），男，博士，北京航空航天大学计算机学院教授、博士生导师，计算机科学技术系主任，计算机系统结构研究所副所长，中国计算机学会（CCF）大数据专家委员会委员、高性能计算专业委员会常务委员、容错计算专业委员会委员，中国电子学会云计算专家委员会委员，主要研究方向为计算机体系结构、大数据存储、高性能计算等。曾获国家科技进步奖二等奖4项、省部级科技进步奖一等奖4项及其他省部级奖项5项。发表SCI/EI论文230多篇，申请发明专利100多项，其中授权发明专利88项" ]
  [ "霍志胜（1983- ），男，博士，北京航空航天大学计算机学院助理研究员，主要研究方向为大数据存储、分布式存储系统、分布式/并行文件系统等。作为项目主持人和项目骨干，主持和参与了多项博士后基金面上项目、国家重点研发计划项目、国家自然科学基金面上项目等" ]
  [ "徐耀文（1996- ），男，北京航空航天大学计算机学院硕士生，主要研究方向为分布式文件系统、高性能计算、网络安全等" ]
- 基金信息：
  
  国家重点研发计划资助项目;The National Key Research and Development Program of China(2018YFB0203901)
- DOI：10.11959/j.issn.2096-0271.2021049
  中图分类号： TP319
- 网络首发：2021-09，
  
  纸质出版：2021-09-15
- 稿件说明：
移动端阅览
霍建同, 肖利民, 霍志胜, 等. 广域虚拟数据空间中边缘缓存系统的研究与实现[J]. 大数据, 2021,7(5):2021049.

Jiantong HUO, Limin XIAO, Zhisheng HUO, et al. Research and implementation of edge cache system in global virtual data space across WAN[J]. Big data research, 2021, 7(5): 2021049.
霍建同, 肖利民, 霍志胜, 等. 广域虚拟数据空间中边缘缓存系统的研究与实现[J]. 大数据, 2021,7(5):2021049. DOI： 10.11959/j.issn.2096-0271.2021049.

Jiantong HUO, Limin XIAO, Zhisheng HUO, et al. Research and implementation of edge cache system in global virtual data space across WAN[J]. Big data research, 2021, 7(5): 2021049. DOI： 10.11959/j.issn.2096-0271.2021049.

摘要

针对广域虚拟数据空间系统中边缘客户端访问和共享远程数据时，数据冗余传输造成大量网络带宽浪费的问题，通过研究广域虚拟数据空间系统中的缓存技术，提出边缘缓存机制优化数据访问通路，将数据以文件粒度缓存在靠近边缘客户端的位置，从而提升上层应用访问和共享数据的性能。测试结果表明，作为虚拟数据空间系统的补充，提出的边缘缓存系统可提升广域数据共享的性能。

Abstract

Aiming at the problem of a large amount of network bandwidth wasted by data redundancy transmission when the edge client accesses and shares remote data in the GVDS

the caching technology in the wide-area virtual data space system was studied and an edge caching mechanism to optimize the data access path was proposed.The data is cached at a file granularity close to the edge client

thereby improving the performance of upper-level applications to access and share data.The experimental results show that the edge cache system proposed can improve the performance of wide-area data sharing as a supplement to the GVDS.

关键词

Keywords

references

肖利民 , 宋尧 , 秦广军 , 等 . GVDS:面向广域高性能计算环境的虚拟数据空间 [J ] . 大数据 , 2021 , 7 ( 2 ): 123 - 146 .

XIAO L M , SONG Y , QIN G J , et al . GVDS:a global virtual data space for wide-area high-performance computing environments [J ] . Big Data Research , 2021 , 7 ( 2 ): 123 - 146 .

ASHTON K . That “Internet of things”thing [J ] . RFID Journal , 2009 , 22 ( 7 ): 97 - 114 .

施巍松 , 张星洲 , 王一帆 , 等 . 边缘计算:现状与展望 [J ] . 计算机研究与发展 , 2019 , 56 ( 1 ): 69 - 89 .

SHI W S , ZHANG X Z , WANG Y F , et al . Edge computing:state-of-the-art and future directions [J ] . Journal of Computer Research and Development , 2019 , 56 ( 1 ): 69 - 89 .

刘立明 , 王彬 . 气象网格环境下大数据的端到端传输机制研究 [J ] . 计算技术与自动化 , 2014 , 33 ( 1 ): 122 - 126 .

LIU L M , WANG B . Research of an endto-end transfer mechanism for big data in CMAGrid environment [J ] . Computing Technology and Automation , 2014 , 33 ( 1 ): 122 - 126 .

王彬 , 宗翔 , 田浩 . 国家气象计算网格的设计与建立 [J ] . 应用气象学报 , 2010 , 21 ( 5 ): 632 - 640 .

WANG B , ZONG X , TIAN H . Design and establishment of a nationwide meteorological computational grid [J ] . Journal of Applied Meteorological Science , 2010 , 21 ( 5 ): 632 - 640 .

European open science cloud [J ] . Nature Genetics , 2016 , 48 ( 8 ): 821 .

DILLEY J , MAGGS B , PARIKH J , et al . Globally distributed content delivery [J ] . IEEE Internet Computing , 2002 , 6 ( 5 ): 50 - 58 .

RAMASWAMY L , LIU L , IYENGAR A . Scalable delivery of dynamic content using a cooperative edge cache grid [J ] . IEEE Transactions on Knowledge and Data Engineering , 2007 , 19 ( 5 ): 614 - 630 .

SATYANARAYANAN M , BAHL P , CACERES R , et al . The case for VMbased cloudlets in mobile computing [J ] . IEEE Pervasive Computing , 2009 , 8 ( 4 ): 14 - 23 .

WILKINSON S STORJ a peer-to-peer cloud storage network [Z ] . 2014 .

CHEN B Q , YANG C Y , WANG G . Highthroughput opportunistic cooperative device-to-device communications with caching [J ] . IEEE Transactions on Vehicular Technology , 2017 , 66 ( 8 ): 7527 - 7539 .

TAN H S , JIANG S H C , HAN Z H , et al . Camul:online caching on multiple caches with relaying and bypassing [C ] // Proceedings of IEEE Conference on Computer Communications . Piscataway:IEEE Press , 2019 : 244 - 252 .

CHERKASOVA L . Improving WWW proxies performance with greedy-dualsize-frequency caching policy [Z ] . 1998 .

KARGER D , LEHMAN E , LEIGHTON T , et al . Consistent hashing and random trees:distributed caching protocols for relieving hot spots on the World Wide Web [C ] // Proceedings of the 29th Annual ACM Symposium on Theory of Computing . New York:ACM Press , 1997 : 654 - 663 .

DAS A , GUPTA I , MOTIVALA A . SWIM:scalable weakly-consistent infectionstyle process group membership protocol [C ] // Proceedings of International Conference on Dependable Systems and Networks . Piscataway:IEEE Press , 2002 : 303 - 312 .

BIRMAN K . The promise,and limitations,of gossip protocols [J ] . ACM SIGOPS Operating Systems Review , 2007 , 41 ( 5 ): 8 - 13 .

浏览量

511

下载量

CSCD

文章被引用时，请邮件提醒。

提交

工具集

关联资源

暂无数据