[1]李绍松 尹栋 慕德俊 戴冠中.基于FPGA可扩展的Mapreduce架构设计与实现[J].计算机技术与发展,2012,(02):103-106.
　LI Shao-song,YIN Dong,MU De-jun,et al.Scalable Mapreduce Framework Design and Realization Based on FPGA[J].,2012,(02):103-106.
点击复制

基于FPGA可扩展的Mapreduce架构设计与实现()
分享到：

《计算机技术与发展》[ISSN:1006-6977/CN:61-1281/TN]

卷:
期数:
2012年02期
页码:
103-106
栏目:
智能、算法、系统工程
出版日期:
1900-01-01

文章信息/Info

Title:
Scalable Mapreduce Framework Design and Realization Based on FPGA
文章编号:
1673-629X（2012）02-0103-04
作者:
李绍松1 尹栋2 慕德俊2 戴冠中2
[1]中国人民解放军驻844厂军事代表室[2]西北工业大学自动化学院
Author(s):
LI Shao-song; YIN Dong; MU De-jun; DAI Guan-zhong
[1]Chinese Military Representative Manufactory[2]Automation School,Northwestern Polytechnical University
关键词:
Mapreduce架构; FPGA; 可扩展; 协处理系统; 流水线操作
Keywords:
Mapreduce framework;  FPGA;  scalable;  coprocessor system;  pipeline
分类号:
TP393.02
文献标志码:
A
摘要:
在基于机群的Mapreduce架构模型基础上,提出了一种基于CPU和FPGA环境、可扩展的Mapreduce架构。通过网络连接和驱动模块,实现了计算机软件与可编程硬件之间的通信,其中,CPU主机主要完成于文件系统的通行,将复杂耗时的运算过程转移到FPGA平台中处理,并引入内部流水线处理过程,大幅度加速了系统运算过程。同时,该架构可将更多的任务扩展到多个FPGA平台,弥补了器件内部存储资源的局限性,提高了系统的性能。此外,软硬件之间的命令、状态等信息交互为管理在FPGA中扩展任务提供了有效途径。实验证明,此架构在大幅提高运算速度的同时,提供了较好的底层设备可扩展性和管理的灵活性
Abstract:
It presents a scalable Mapreduce framework on FPGA to accelerate commodity hardware.In this design,commodity hardware（CH） runs the main framework to communicate with file system in networks,while FPGA based platform is linked with CH to run Mapreduce tasks.Due to resource limited in one chip,more tasks can be extended to more FPGA platforms to achieve high-speed performance.A virtual device driver is designed in software to manage tasks running in special hardware.According to internal pipeline design and scalability,the design is proved that it allows better performance than commodity hardware,and also provides advantages in scalability and flexibility

相似文献/References:

[1]徐钊,吴光敏,覃世欢.基于AccelDSP的LBP算法在人脸识别中的应用[J].计算机技术与发展,2014,24(01):51.
　XU Zhao,WU Guang-min,QIN Shi-huan.Application of LBP Algorithm Based on AccelDSP in Face Recognition[J].,2014,24(02):51.
[2]单天昌 陆达.基于FPGA的PCI接口DMA传输的设计与实现[J].计算机技术与发展,2010,(04):215.
　SHAN Tian-chang,LU Da.Design and Realization of DMA Transfers in PCI Interface Based on FPGA[J].,2010,(02):215.
[3]陈良明 韩泽耀.OFDM——第四代移动通信的主流技术[J].计算机技术与发展,2008,(03):184.
　CHEN Liang-ming,HAN Ze-yao.OFDM--Main Technology of 4G Mobile Communication System[J].,2008,(02):184.
[4]赵骞 李挥 马建设.基于FPGA的光学头E-F相位差检测系统[J].计算机技术与发展,2009,(08):182.
　ZHAO Qian,LI Hui,MA Jian-she.Test System of E - F Phase Difference of Optical Pick- up Heads with FPGA[J].,2009,(02):182.
[5]何春芬 张玲 何伟.基于模数混合FPGA的便携式电子血压计设计[J].计算机技术与发展,2009,(09):164.
　HE Chun-fen,ZHANG Ling,HE Wei.Design of Portable Electronic Sphygmomanometer Based on Digital- Analog Mixed FPGA[J].,2009,(02):164.
[6]杨军 郭跃东 蒋慕蓉.基于FPGA的FFT处理器研究与设计[J].计算机技术与发展,2009,(09):225.
　YANG Jun,GUO Yue-dong,JIANG Mu-rong.Research and Design for FFT Processor Based on FPGA[J].,2009,(02):225.
[7]曹硕 王晓蔚 杨全胜.基于ARM和VxWorks的PC104总线模块检测系统[J].计算机技术与发展,2009,(02):250.
　CAO Shuo,WANG Xiao-wei,YANG Quan-sheng.PC104 Bus Module Detecting System Based on ARM and VxWorks[J].,2009,(02):250.
[8]崔涛 杨全胜.基于FPGA技术的通用模糊控制器设计[J].计算机技术与发展,2009,(03):15.
　CUI Tao,YANG Ouan-sheng.Design of Universal Fuzzy Controller Based on FPGA[J].,2009,(02):15.
[9]徐慧 王金海 王巍.基于FPGA的8051IP核的设计与实现[J].计算机技术与发展,2009,(03):42.
　XU Hui,WANG Jin-hai,WANG Wei.Design and Implementation of 8051 IP Core Based on FPGA[J].,2009,(02):42.
[10]沈海嘉 杨全胜.基于FPGA的ARM9与PC／104总线接口的设计[J].计算机技术与发展,2009,(03):182.
　SHEN Hai-jia,YANG Quan-sheng.Design and Realization of Interface Between ARM9 and PC/104 Based on FPGA[J].,2009,(02):182.

备注/Memo

备注/Memo:
西北工业大学研究生创业种子基金（Z2011049）李绍松（1963-），男，高级工程师，主要研究方向计算机网络、控制理论；慕德俊，教授，博士生导师，主要研究方向为信息安全、网络控制；戴冠中，教授，博士生导师，主要研究方向为网络控制
更新日期/Last Update: 1900-01-01