基于MapReduce的海量图像处理模型的研究

作者:周涛; 贺其备; 黄光明; 林和平
来源:信息技术, 2013, (11): 114-116.
DOI:10.13274/j.cnki.hdzj.2013.11.041

摘要

针对目前图像的格式和数量都在不断增加,传统的串行处理方法无法满足海量的图像数据处理的问题,提出一种基于MapReduce并行框架的海量图像数据处理模型。模型中取消了Reduce处理函数,在Map函数处理完成后直接输出处理结果,不仅避免了Reduce函数和Reduce任务处理所需的时间,同时减少了Map与Reduce阶段之间操作所消耗的时间。实验基于Hadoop伪分布式云平台,实现了文中提出的并行处理模型。

全文