标签: workload

R作业排队/工作负载管理

我花了一些时间在Google上寻找R的排队/负载均衡器包.

我想要实现的目标:

  • 从远程前端执行多个独立的R函数独立
  • 利用2个双核服务器作为R后端

知道:

  • 每个功能通常在10到30秒内处理
  • 平均每5分钟(但它可以同时)将一组8-15个要执行的函数发送到后端(排队等待处理:先进先出).5分钟是平均值,也可以同时发送几组
  • 2x2 R实例已经运行,加载了所需的包,它们总是相同的,所以不需要一直重新加载它们
  • 输入的数据输入量非常低:最大50k

这里没有代码并行化主题(雪,降雪foreach,condor和其他传统的集群解决方案)

你知道一个专为R设计的好包装/工具吗?

非常感谢 !

r queuing workload job-scheduling

6
推荐指数
1
解决办法
639
查看次数

过量使用lucene好吗?

在我的项目中,整个内容的搜索和列表取决于Lucene.我没有遇到任何性能问题.尽管如此,该项目仍处于开发阶段,并且还有很长的路要走.

我必须在大型结构项目完成之前找出性能问题.过量使用lucene是否可行?

lucene performance project workload

2
推荐指数
1
解决办法
912
查看次数

标签 统计

workload ×2

job-scheduling ×1

lucene ×1

performance ×1

project ×1

queuing ×1

r ×1