IT虾米网

java之Hadoop Mapreduce 字数统计

artech 2023年09月08日 编程语言 217 0

从 Eclipse Kepler 运行 Hadoop MapReduce WordCount 程序与使用位于 Mapreduce (hadoop-mapreduce-example-2.6.0.jar) 中的预定义 jar 文件运行它有什么区别。 在速度、性能等方面有什么区别吗?

请您参考如下方法:

没有区别。只是当你的输入很大并且你有 mapper/reducer 在多个节点上运行时,你会看到显着的性能提升,因为现在字数统计将在不同的机器上并行完成。


评论关闭
IT虾米网

微信公众号号:IT虾米 (左侧二维码扫一扫)欢迎添加!