R作业排队/工作负载管理

Question

我花了一些时间在Google上寻找R的排队/负载均衡器包.

我想要实现的目标:

• 从远程前端执行多个独立的R函数独立
• 利用2个双核服务器作为R后端

知道:

• 每个功能通常在10到30秒内处理
• 平均每5分钟(但它可以同时)将一组8-15个要执行的函数发送到后端(排队等待处理:先进先出).5分钟是平均值,也可以同时发送几组
• 2x2 R实例已经运行,加载了所需的包,它们总是相同的,所以不需要一直重新加载它们
• 输入的数据输入量非常低:最大50k

这里没有代码并行化主题(雪,降雪foreach,condor和其他传统的集群解决方案)

你知道一个专为R设计的好包装/工具吗？

非常感谢 !

Answer 1

这听起来像是使用 的合理上下文RApache，它可以实例化多个 R 实例和必要的包。