| 基于SDN的MapReduce带宽优化设计 |
| |
| 引用本文： | 杨 军,吕 璐,徐 冠,王 曼,戴 彬.基于SDN的MapReduce带宽优化设计[J].计算机应用研究,2016,33(10). |
| |
| 作者姓名： | 杨 军 吕 璐 徐 冠 王 曼 戴 彬 |
| |
| 作者单位： | 华中科技大学 电子信息与通信学院,华中科技大学 电子信息与通信学院,华中科技大学 电子信息与通信学院,华中科技大学 电子信息与通信学院,华中科技大学 电子信息与通信学院 |
| |
| 基金项目： | 国家科技支撑计划(2012BAH93F01),国家科技重大专项(2010ZX03003-003-03),国家自然科学基金(60803005)； |
| |
| 摘 要： | 在实际Hadoop系统中，如何使作业完成时间最短成为了一个NP完全问题，导致这个问题的主要原因是MapReduce计算过程中大量的数据从Map节点向Reduce节点进行迁移，容易造成网络拥塞，使得数据迁移时间过长。软件定义网络（SDN）实现了路由控制和数据转发的分离，同时使交换机能够对网络中的数据进行灵活的处理，使控制器能够知晓全局网络拓扑结构，其集中式管理模式为Hadoop进行性能优化带来了可能性。利用SDN对网络的灵活控制，让Map中间值在OpenFlow交换机上进行数据合并，减少数据流量和数据迁移时间，提高Hadoop工作效率。
|
| 关 键 词： | 软件定义网络 MapReduce 带宽优化 |
| 收稿时间： | 8/3/2015 12:00:00 AM |
| 修稿时间： | 2016/8/16 0:00:00 |
Optimization design of MapReduce based on SDN |
| |
| YANG Jun,LV Lu,XU Guan,WANG Man and DAI Bin.Optimization design of MapReduce based on SDN[J].Application Research of Computers,2016,33(10). |
| |
| Authors: | YANG Jun LV Lu XU Guan WANG Man and DAI Bin |
| |
| Affiliation: | School of Electronic Information and Communications,Huazhong University of Science Technology,School of Electronic Information and Communications,Huazhong University of Science Technology,School of Electronic Information and Communications,Huazhong University of Science Technology,School of Electronic Information and Communications,Huazhong University of Science Technology, |
| |
| Abstract: | |
| |
| Keywords: | software defined network MapReduce bandwidth optimization |
|
| 点击此处可从《计算机应用研究》浏览原始摘要信息 |
|
点击此处可从《计算机应用研究》下载全文 |
|
