标签: cluster-computing

使用Linux Virtual Server在MMO游戏中对区域进行负载均衡

我是一个MMO游戏的开发者,目前我们在我的公司面临一些可伸缩性问题,我认为,这些问题可以通过适当的游戏世界聚类来解决.

我真的不想重新发明轮子,这就是为什么我认为Linux Virtual Server可能是一个不错的选择,特别是使用一些7级负载平衡技术.

我目前正在将ktcpvs视为负载平衡解决方案,并想知道它是否是一个合适的选择.

主要思想是在专用服务器上运行多个区域(就我的游戏而言"位置").当玩家决定前往某个特定位置时,负载均衡器会决定哪个区域服务器将实际为玩家提供服务(这实际上是我需要7级负载均衡器的原因)

你们对上述所有人都有什么看法?

更新:我向LVS用户发送了相同的问题邮件列表http://marc.info/?l=linux-virtual-server&m=124976265209769&w=2

更新:我也在gamedev.net论坛http://www.gamedev.net/community/forums/topic.asp?topic_id=544386上开始了类似的话题

linux virtualization cluster-computing mmo

5
推荐指数
1
解决办法
2280
查看次数

如何集群和负载平衡Spring + OSGi应用程序

我正在考虑用Spring和OSGi开发一个Web应用程序.看起来他们很好地融合在一起.集群和负载均衡这样一个应用程序有哪些选择?每个应用程序的优缺点是什么?

java spring osgi load-balancing cluster-computing

5
推荐指数
1
解决办法
6468
查看次数

AppFabric缓存群集 - 无法启动第二个主机

我在使用2台主机运行AppFabric群集时遇到了问题.我已经验证它只适用于1个主机(即,当我浏览Web应用程序时缓存项目数量增加),但是当我尝试将第二个主机加入群集时,我得到以下异常:

Failed to read remote registry key from host 289851-cache2: 
Microsoft.ApplicationServer.Caching.DataCacheException: 
ErrorCode<ERRCAdmin026>:SubStatus<ES0001>:Remote registry access failed on host 289851-cache2.
Check if the required permissions are available. ---> System.IO.IOException: The network path was not found.

    at Microsoft.Win32.RegistryKey.Win32ErrorStatic(Int32 errorCode, String str)

    at Microsoft.Win32.RegistryKey.OpenRemoteBaseKey(RegistryHive hKey, String machineName, RegistryView view)

    at Microsoft.ApplicationServer.Caching.AdminApi.CacheAdmin.GetRemoteRegistryKey(String hostName, Boolean writable)

    --- End of inner exception stack trace ---

    at Microsoft.ApplicationServer.Caching.AdminApi.CacheAdmin.GetRemoteRegistryKey(String hostName, Boolean writable)

    at Microsoft.ApplicationServer.Caching.AdminApi.CacheAdmin.GetServerVersion(String 

hostName),DistributedCache.CacheAdmin,Error
Run Code Online (Sandbox Code Playgroud)

其中289851-cache2是第二个主机的名称.

即使异常表示检查权限,我已将缓存连接帐户更改为我的域帐户并在任何地方授予访问权限 - 该帐户在两台AppFabric主机上都是管理员,具有对网络共享的完全访问权限,并且我运行AppFabric PowerShell作为管理员.但是在我运行Start-CacheCluster之后,第一个主机的状态为UP,而第二个主机的状态为STARTING无限期.我需要重新启动机器才能执行任何其他操作,因为即使通过任务管理器或控制面板中的服务,它也不会让我停止,启动或终止进程.

我们运行Windows Server 2008 64位,安装了WindowsServerAppFabricSetup_x64_6.0(因为我认为需要Windows Server 2008 R2,而不是6.1,因为配置存储在网络共享上).

主机1的DistributedCacheAgent.config:

  <host …
Run Code Online (Sandbox Code Playgroud)

cluster-computing appfabric

5
推荐指数
1
解决办法
3631
查看次数

Wildfly 9:JGRP000012:来自不同集群hq-cluster的废弃消息(我们的集群是ee)

在我们从Wildfly 8.2.1.Final升级到Wildfly 9.0.1.Final后,我们开始收到很多警告,如下所示:

WARNING [org.jgroups.protocols.TCP] (INT-1,ee,dev6.example.com:server1) JGRP000012: discarded message from different cluster hq-cluster (our cluster is ee). Sender was ad3f8046-3c95-f6d4-da13-3019d931f9e4 (received 4 identical messages from ad3f8046-3c95-f6d4-da13-3019d931f9e4 in the last 64159 ms)
Run Code Online (Sandbox Code Playgroud)

这些消息适用于主机上的各种主机和服务器.同样的事情是在Betas和CR版本的Wildfly中,另一方面,它不是版本8.我们使用TCP作为传输,但根据其他资源,相同的是UDP.

有人有解决方案(当然除了提高日志的严重性级别)?谢谢.

cluster-computing hornetq wildfly

5
推荐指数
1
解决办法
2228
查看次数

单Windows机器上的多个Spark Worker

我正在尝试在Windows上使用Intellij通过Scala自学Spark。我正在单台计算机上执行此操作,并且我想在单台计算机上启动多个工作程序来模拟集群。我在此页上读到说

“启动脚本当前不支持Windows。要在Windows上运行Spark集群,请手动启动master和worker。”

我不知道手工启动主人和工人意味着什么。有人可以帮忙吗?非常感谢您的帮助/建议。

scala cluster-computing apache-spark

5
推荐指数
1
解决办法
665
查看次数

是否可以仅从复杂因子为3的Cassandra集群中的单个节点读取数据?

我知道Cassandra具有不同的读取一致性级别但我没有看到一致性级别,它允许仅通过密钥从一个节点读取数据.我的意思是如果我们有一个复制因子为3的集群,那么我们将在读取时始终询问所有节点.即使我们选择一致性级别,我们也会询问所有节点,但是等待来自任何节点的第一个响应.这就是为什么我们在读取时不仅要加载一个节点而是加载3个(带有协调器节点的4个节点).我认为即使我们设置了更大的复制因子,我们也无法真正提高读取性能.

是否可以仅从单个节点读取?

replication consistency cluster-computing database-replication cassandra

5
推荐指数
1
解决办法
1223
查看次数

亚马逊Elastic MapReduce上的Apache Hama

我正在尝试使用https://github.com/awslabs/emr-bootstrap-actions/tree/master/hama脚本在Amazon Elastic MapReduce上运行Apache Hama .但是,当尝试使用一个主节点和两个从节点时,peer.getNumPeers()在BSP代码中仅报告1个对等节点.我怀疑哈马是否以local模式运行.

此外,在https://hama.apache.org/getting_started_with_hama.html上查看配置,我的理解是所有服务器的列表应该在hama-site.xml文件中的属性hama.zookeeper.quorum和groomservers文件中.但是,我想知道这些是否在安装脚本中正确配置.如果有人能够指出它是否是脚本中的限制或我是否做错了,真的很感激.

apache cluster-computing amazon-emr hama

5
推荐指数
1
解决办法
75
查看次数

NodeJS集群和数据库连接

我一直在尝试在NodeJS(https://nodejs.org/api/cluster.html)中进行集群,并能够集中我的服务器.

我有一个mongodb连接,它在服务器启动时建立

之前这不是问题,因为它建立一次(没有集群).

我认为,通过聚类,它为每个集群建立一次(我不清楚这一点).

那么,对于每个工作者(或)仅针对主进程,是否应该为整个服务器(或)执行一次连接?

推荐的方法是什么?如何实现?

提前致谢.

cluster-computing mongodb node.js

5
推荐指数
1
解决办法
817
查看次数

h2数据库同步

我正在使用h2版本:1.4.187并且存在以下问题:

我的架构:每个应用程序和1个h2数据库上有2台服务器.

数据库正在集群中工作; 这意味着如果其中一个h2数据库关闭,其他数据库将接管.我们称他们为A和B.

如果两者都处于活动状态且用户在应用程序中写入内容,则数据将在A和B上复制.但如果A关闭且用户在此期间写入内容,则它将仅在B上,这是有道理的,但如果A再次启动,它不会自动同步并从B中获取数据.我正在寻找自动同步.这意味着如果数据库在数据丢失时丢失了数据,那么当它再次联机时,它应该独立地将丢失的数据.

有解决方案吗?

database synchronization cluster-computing h2

5
推荐指数
1
解决办法
954
查看次数

h2o软件包:群集总内存为零

data1.dl.r2 = vector()
for (i in 1:100) {
if (i==1) {
  data1.hex = as.h2o(data1)
} else {
  data1.hex = nextdata 
}
  data1.dl = h2o.deeplearning    (x=2:1000,y=1,training_frame=data1.hex,nfolds=5,activation="Tanh",hidden=30,seed=5,reproducible=TRUE)
  data1.dl.pred = h2o.predict(data1.dl,data1.hex)
  data1.dl.r2[i] = sum((as.matrix(data1.dl.pred)-mean(as.matrix(data1.hex[,1])))^2)/
sum((as.matrix(data1.hex[,1])-mean(as.matrix(data1.hex[,1])))^2) # R-squared

  prevdata = as.matrix(data1.hex)
  nextpred = as.matrix(h2o.predict(data1.dl,as.h2o(data0[i,])))
  colnames(nextpred) = "response"
  nextdata = as.h2o(rbind(prevdata,cbind(nextpred,data0[i,-1])))

  print(i)
}
Run Code Online (Sandbox Code Playgroud)

这是我的代码,其中包含100个观测值和1000个要素的数据集(data1)。运行此命令时,它在第50〜60次迭代时给了我一条错误消息“

Error in .h2o.doSafeREST(h2oRestApiVersion = h2oRestApiVersion, urlSuffix = page,  : 


ERROR MESSAGE:

Total input file size of 87.5 KB is much larger than total cluster memory of Zero  , please use either …
Run Code Online (Sandbox Code Playgroud)

memory memory-management cluster-computing deep-learning h2o

5
推荐指数
1
解决办法
1658
查看次数