本文介绍了多核机器上的Hadoop和map-reduce的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我读了很多关于Hadoop和Map-Reduce在机器集群上运行的信息。是否有人知道Apache发行版是否可以在具有多个内核的SMP上运行。特别是可以在同一台机器上运行多个Map-Reduce进程。调度程序将负责将它们分布到多个内核中。谢谢。 - KG

解决方案

是的。你在每台机器上都有多个映射和减少插槽,这些插槽是由RAM和CPU决定的(每个JVM实例默认需要1GB,因此具有16个内核的8GB计算机应该仍然有7个任务插槽)



来自

这篇关于多核机器上的Hadoop和map-reduce的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持!

05-29 05:00
查看更多