本文作者:王刚;唐杰;武港山;成功正常投稿发表论文到《计算机技术与发展》2014年01期,引用请注明来源400期刊网!
【摘要】:现如今,GPU作为一种低功耗高性能图形处理器单元,被广泛应用于高度并行化的应用程序中。其线程和内存的层次结构在诸多成功的多线程应用和科学研究中表现出巨大的优势。为了简化多GPU集群的编程模式以及更好地利用GPU的计算性能,设计并实现了一个新的基于多GPU的MapReduce并行编程框架。使用了并行虚拟文件系统(PVFS)来存储数据,考虑了动态的负载平衡和GPU相关的权重要素以达到优化系统的效率、透明性以及系统的可伸缩性的目的。在文中,将演示使用该编程模式解决地质应用的一个典型的偏移应用-叠前时间偏移(PKTM),并给出实验结果。
【论文正文预览】:1背景介绍如今,随着云计算、社交媒体和移动计算的快速发展,大规模数据已经逐渐被大众所接受。而此时,大规模数据处理:日益增长的博客、视频、音频在百万用户之间传递着有价值的信息,这些都正在改变着世界。然而,面对如此大量的数据,如何快速、准确地处理这些信息是当前最大的
【文章分类号】:TP391.41
【稿件关键词】:多GPU集群MapReduce地震偏移负载平衡
【参考文献】:
- 刘兆春,李光辉,王庆国,柴守海;并行文件系统PVFS[J];信息技术;2005年04期
- 刘芳;邓笋根;聂宁明;王彦棡;王珏;;克希霍夫时间偏移在GPU集群上的MPI/CUDA混合编程实现[J];科研信息化技术与应用;2012年05期
- 刘天华;朱宏峰;杜梅;常桂然;;RDMA技术的研究与应用[J];沈阳师范大学学报(自然科学版);2006年02期
- 卢照;张锦娟;师军;鱼佳欣;;MPI动态负载平衡策略的研究与实现[J];计算机技术与发展;2010年05期
- 何晓川;田昊;曹培发;;GCFS文件系统读操作的设计与实现[J];计算机与现代化;2010年02期
- 张艳华;刘祥港;;一种基于MPI与OpenMP的矩阵乘法并行算法[J];计算机与现代化;2011年07期
- 李文芝;刘天华;;基于FPGA的10/100/1000M三态以太网卡设计[J];沈阳师范大学学报(自然科学版);2010年01期
- 张文斌;;计算机集群中负载均衡技术的研究[J];电子测试;2011年11期
- 傅游;李丽丽;花嵘;;渲染机群管理系统负载平衡算法的研究与实现[J];计算机技术与发展;2011年07期
- 卢风顺;面向CPU/GPU异构体系结构的并行计算关键技术研究[D];国防科学技术大学;2012年
- 孙龙;CMAQ模型的并行效率优化研究[D];陕西师范大学;2011年
- 李涛;基于FP-Growth关联规则的并行算法分析及其应用研究[D];辽宁工程技术大学;2011年
- 张丽君;一种无主控制的云存储架构的研究[D];大连理工大学;2011年
- 陈玲玲;海量存储系统扩展中数据组织调整的研究[D];华中科技大学;2007年
- 吴传文;DNFS:一种面向Linux集群的可扩展分布式文件系统[D];华中科技大学;2009年
- 龚高晟;通用分布式文件系统的研究与改进[D];华南理工大学;2010年
- 盛月峰;IPTV高效数据分发及传输质量监测技术研究[D];国防科学技术大学;2010年
- 沈利;Infiniband网络接口的研究与实现[D];国防科学技术大学;2010年
- 刘丽娜;基于双服务器架构的电视广告管理系统[D];吉林大学;2012年
- 童静;多层周期结构光栅衍射模拟算法的GPU加速研究[D];电子科技大学;2013年
- 焦素云,徐中宇;分布式系统的动态负载平衡[J];长春光学精密机械学院学报;1999年03期
- 刘国峰;刘洪;王秀闽;孟小红;;Kirchhoff积分时间偏移的两种走时计算及并行算法[J];地球物理学进展;2009年01期
- 邹振;刘洪;刘红伟;;Kirchhoff叠前时间偏移角度道集[J];地球物理学报;2010年05期
- 梁意文,潘海军,郭学理;基于UNIX进程的入侵检测模型[J];计算机工程与应用;2001年15期
- 马艳琨,马胜甫,田俊峰,张建勋;一种用于PC存储集群的动态负载平衡策略[J];计算机工程与应用;2004年29期
- 李冬梅;施海虎;;负载平衡调度问题的一般模型研究[J];计算机工程与应用;2007年08期
- 刘淳,汪为农;系统安全检测的研究及应用[J];计算机工程;1999年08期
- 唐丹,金海,张永坤;集群动态负载平衡系统的性能评价[J];计算机学报;2004年06期
- 李肯立;彭俊杰;周仕勇;;基于CUDA的Kirchhoff叠前时间偏移算法设计与实现[J];计算机应用研究;2009年12期
- 赵改善;;地球物理高性能计算的新选择:GPU计算技术[J];勘探地球物理进展;2007年05期
- 杨秋杰;;云计算的核心技术——粒度计算[J];信息安全与技术;2010年08期
- 郑欣杰;朱程荣;熊齐邦;;基于MapReduce的分布式光线跟踪的设计与实现[J];计算机工程;2007年22期
- 许春玲;;基于MapReduce范式构造树与表[J];电脑知识与技术;2010年01期
- 谢桂兰;罗省贤;;基于Hadoop MapReduce模型的应用研究[J];微型机与应用;2010年08期
- 赵青;孙济洲;肖健;于策;崔辰州;刘旭;袁鳌;;基于MapReduce模型的分布式天文交叉证认[J];计算机应用研究;2010年09期
- 李成华;张新访;金海;向文;;MapReduce:新型的分布式并行计算编程模型[J];计算机工程与科学;2011年03期
- 王桂强;陆朝俊;;基于并行技术的大数据量统计分析探讨[J];计算机应用与软件;2011年03期
- 朱敏;万剑怡;王明文;;基于MR的并行决策树分类算法的设计与实现[J];广西师范大学学报(自然科学版);2011年01期
- 白浩泉;姚立红;陆松年;;基于MapReduce并行计算模型的报警聚合算法[J];信息技术;2011年04期
- 师金钢;鲍玉斌;冷芳玲;于戈;;MapReduce环境下的并行Dwarf立方构建[J];计算机科学与探索;2011年05期
- 马坚伟;孙兵兵;;三维曲波变换地震偏移[A];中国地球物理学会第二十七届年会论文集[C];2011年
- 李瑞;王朝坤;郑伟;王建民;王伟平;;基于MapReduce框架的近似复制文本检测[A];NDBC2010第27届中国数据库学术会议论文集(B辑)[C];2010年
- 孙广中;肖锋;熊曦;;MapReduce模型的调度及容错机制研究[A];2007年全国开放式分布与并行计算机学术会议论文集(上册)[C];2007年
- 赵伟;陈承收;李立军;;基于MapReduce云计算模型的碰撞检测算法[A];'2010系统仿真技术及其应用学术会议论文集[C];2010年
- 郑启龙;房明;汪胜;王向前;吴晓伟;王昊;;基于MapReduce模型的并行科学计算[A];2009年全国开放式分布与并行计算机学术会议论文集(上册)[C];2009年
- 郑启龙;王昊;吴晓伟;房明;;HPMR:多核集群上的高性能计算支撑平台[A];2008年全国开放式分布与并行计算机学术会议论文集(上册)[C];2008年
- ;经审查在年会上发言的论文[A];2000年中国地球物理学会年刊——中国地球物理学会第十六届年会论文集[C];2000年
- 李虎;邹鹏;贾焰;周斌;;一种基于Map Reduce的分布式文本数据过滤模型研究[A];第26次全国计算机安全学术交流会论文集[C];2011年
- 刘伊克;Hongchuan Sun;常旭;;基于波射线路径偏移压制多次波[A];中国科学院地质与地球物理研究所二○○四学术论文汇编·第四卷(新生代·地磁与空间电磁·工程地质与应用地球物理)[C];2004年
- 符力耘;孙伟家;李东平;;退化的Fourier偏移算子及其在复杂断块成像中的应用[A];中国科学院地质与地球物理研究所2007学术论文汇编(第一卷)[C];2008年
- 刘琦;MapReduce:亚马逊云服务再添新援[N];中国计算机报;2009年
- 《网络世界》记者 周源;Platform MapReduce:专注企业级用户[N];网络世界;2011年
- 本报记者 彭德倩;他让人类“透视”地球更清晰[N];解放日报;2011年
- 丁泽柳;一体化信息基础设施中面向MapReduce的递归层次结构数据中心网络研究[D];国防科学技术大学;2012年
- 韩海雯;MapReduce计算任务调度的资源配置优化研究[D];华南理工大学;2013年
- 吴昊;云计算环境下智能优化算法及其在SaaS中的应用研究[D];合肥工业大学;2013年
- 蒋鸿玲;基于流量的僵尸网络检测方法研究[D];南开大学;2013年
- 郑霄;超级计算机系统的可用性评估研究[D];解放军信息工程大学;2009年
- 康俊锋;云计算环境下高分辨率遥感影像存储与高效管理技术研究[D];浙江大学;2011年
- 马辉;基于MapReduce的分布式地震射线追踪方法研究[D];中国地质大学(北京);2012年
- 史恒亮;云计算任务调度研究[D];南京理工大学;2012年
- 李韧;基于Hadoop的大规模语义Web本体数据查询与推理关键技术研究[D];重庆大学;2013年
- 程兴国;仿生算法的动态反馈机制及其并行化实现方法研究[D];华南理工大学;2013年
- 朱盛凯;基于MapReduce的科学计算应用性能分析与优化[D];复旦大学;2010年
- 周飞凤;MapReduce在科学计算中的研究与改进[D];安徽大学;2013年
- 余川江;网格中基于MapReduce应用的可视化系统的设计与实现[D];哈尔滨工业大学;2012年
- 张琦;基于MapReduce的分布式规则匹配系统的研究与实现[D];浙江大学;2011年
- 姚宇;一种基于MapReduce的视频拷贝检测系统[D];复旦大学;2011年
- 刘范范;MapReduce与量子进化算法的研究及应用[D];安徽大学;2012年
- 姜治宇;基于MapReduce的期望最大化算法研究和实现[D];华中科技大学;2012年
- 杨玲;面向云计算的MapReduce并行编程模式的研究与应用[D];湖南大学;2011年
- 从玉相;基于MapReduce的社区挖掘算法[D];上海交通大学;2013年
- 邹鹏;基于抽样分区解决MapReduce中的数据倾斜问题[D];大连理工大学;2013年
【稿件标题】:[java 多线程编程论文]基于多GPU集群的编程框架
【作者单位】:南京大学计算机科学与技术系;
【发表期刊期数】:《
计算机技术与发展》2014年01期
【期刊简介】:《计算机技术与发展》杂志是由中华人民共和国新闻出版总署、正式批准公开发行的优秀期刊,计算机技术与发展杂志具有正规的双刊号,其中国内统一刊号:CN61-1450/TP,国际刊号:ISSN。计算机技术与发展杂志社由陕西省信息产业厅主管、陕西省计算机学会主办,本......更多
计算机技术与发展杂志社(
http://www.400qikan.com/qk/6081/)投稿信息
【版权所有人】:王刚;唐杰;武港山;
更多
科技类论文详细信息:
[java 多线程编程论文]基于多GPU集群的编程框架
http://www.400qikan.com/lunwen/keji/16712.html
相关专题:地域研究与开发 内修于心 外化于行 《计算机技术与发展》相关期刊
推荐期刊:
地质找矿论丛中国药店环境保护与循环经济西北师大学报数学学报无机盐工业化纤文摘石油化工设备技术道路交通与安全重庆三峡学院学报
上一篇:
[论文相似性检测论文]基于攻击图与报警相似性的混合报警关联模型
下一篇:
[源路由算法论文]机会网络中基于定向数据传输的地理路由算法