在办公室计算机上运行Hadoop软件(当它们空闲时)

Sha*_*baz 6 hadoop hbase mapreduce cluster-computing

是否有一个项目有助于在办公桌面上闲置时设置Hadoop集群?

我想试验Hadoop/MR/hbase,但没有访问5-10台计算机.工作中的计算机在数小时后处于空闲状态,并通过非常高速的连接相互连接.更重要的是,这些计算机上的数据保留在我们的网络中,因此没有隐私问题.

为了实现这一点,我需要在每台机器上运行相当轻量级的监视器.当计算机空闲X小时后,它将加入群集.如果用户登录,则必须退出群集并返回所有CPU /内存.

这样的事情存在吗?

joh*_*n64 3

您可以使用任务计划程序来检测空闲状态,然后使用 virtual box 或 vmplayer 启动/停止 hadoop 虚拟机。或者您可以编写一个 powershell 脚本,根据资源使用情况启动停止。