行地进行处理。
图3
图3中说明了用MapReduce处理海量数据的流程,将大数据分解为成百上千的小数据,各个数据分别由集群中的某一个结点生成中间结果,又有大量的结点对中间结果进行计算处理,形成最终结果。
3Google文件系统和Hadoop文件系统对比
表1
尽管Google分布式文件系统和Hadoop分布式文件系统在自己的优势上各具特色,所以对Google分布式文件系统和Hadoop分布式文件系统在实际应用中的各种性能上进行对比。
【参考文献】
1苗放,叶成名,刘瑞,孔祥生新一代数字地球平台与“数字中国”技术体系架构探讨J2007,6
2郭曦榕,苗放,王华军,刘瑞,等基于GS模式架构的数字旅游服务平台研究J遥感技术与应用,2009
3郭曦榕,苗放,王华军,许义兴,等空间信息GS网络访问模式体系架构初探J计算机应用与软件,2009
责任编辑:刘帅
fr