在我的笔记本电脑上使用虚拟机设置多节点Hadoop集群

我有一个Windows 7笔记本电脑，我需要在它上面设置hadoop（多节点）集群。

我已准备好以下事项 -

虚拟软件，即virtualbox和vmware播放器。
两个虚拟机，即 Ubuntu - 用于Hadoop主和 Ubuntu - for（1X）Hadoop slave 有没有人使用笔记本电脑上的虚拟机完成了这样一个集群的设置？

如果是，请帮我安装。

我搜索了谷歌，但我没有得到如何使用虚拟机在hadoop上配置这个多节点集群？

如何使用VMware或virtualbox在Windows 7上运行两个Ubuntu操作系统？

我们应该使用相同的Ubuntu版本VM映像或不同版本的Ubuntu linux的vm映像吗？

3
投票

是的你可以使用ubuntu两个节点。我使用五个节点（1个主节点，4个数据节点）。如果要在vm ware中安装多节点。只需从以下链接下载ubutnu：http://www.ubuntu.com/download/desktop并安装两台机器。并安装java和openssh。并从此链接下载多节点的shell脚本:: https://github.com/tonyreddy/Apache-MultiNode-Insatallation-Shellscript

试试吧......一切顺利............

1
投票

由于您在笔记本电脑上运行Hadoop，显然您是出于学习目的或构建POC或功能调试。

您可以简单地安装预配置的伪分布式虚拟机，而不必经历安装和设置Hadoop及相关大数据软件的麻烦。

一些好的选择是：

我一直在我的笔记本电脑上使用Cloudera的VM已经有一段时间了，它一直很好用。

0
投票

Cloudera和Hortonworks是启动和运行的最快方法。

确保您的笔记本电脑上已安装足够的RAM用于已运行的操作系统，否则您的笔记本电脑将在您使用虚拟机时突然重启。

让我给你举个例子 -

如果您使用的是Windows 10，则需要3-5GB RAM才能顺利运行，这意味着如果您在RAM中加载5GB大小的虚拟机，Windows可能会在找不到足够的RAM来运行时崩溃。

您必须将RAM从8GB升级到12GB或最好16GB，以便您的笔记本电脑顺利运行。

希望能帮助到你