YarnExamples Hadoop 2 (YARN API)中带有Map Reduce示例的存储库
纱线示例Hadoop 2 (YARN API)中带有Map Reduce示例的存储库。当前的例子:如何执行示例?假设你已经克隆了这个存储库,用netbeans编译并构建了一个jar文件,并且已经安装了Hadoop 2.X。如果前面没有问题,则可以使用以下命令执行DgIndexer: hadoop jar /path_to_jar_file/YarnExamples.jar dgIndexer.DgIndexer /user/hduser/data/TrecFile.txt /user/hduser/OutputFolder。如果示例成功完成,您可以查看结果: hdfs -cat /user/hduser/OutputFolder/part-r-00000。设置任意减速器数量:mapreduce.job.reduces hadoop。
下载地址
用户评论