标签: cluster-computing

到 SQL Server 群集的连接字符串

谁能指出我或告诉我如何将连接字符串写入 SQL Server 群集实例?

我想建立到 SQL Server 群集特定实例的数据库(初始目录)的可信连接。我找到了很长一段时间,但无法从谷歌找到官方答案。

我要求 C# ADO.Net 代码的连接字符串。

我知道如何将连接字符串写入普通的单机非集群 SQL Server 实例。

c# sql-server ado.net cluster-computing

5
推荐指数
1
解决办法
2万
查看次数

数据库集群如何工作?

我有一个关于 DBA 的问题:如果我从单个 Web/DB 服务器设置扩展到两个 Web/两个 DB 服务器设置,并在 Web 服务器前面使用负载平衡器来均匀路由传入查询......解决方案如何像 MySQL Cluster 一样工作,以便另一个数据库服务器立即知道对一个数据库服务器所做的更改(否则,路由到另一台数据库服务器的用户将看不到数据或将过时的数据),或者至少这样另一台 Web 服务器是否意识到它正在读取“脏数据”并且应该在 X 秒内重试以获得最新数据?

谢谢你。

database cluster-computing

5
推荐指数
1
解决办法
1万
查看次数

如何使用 ssh 和 bash 脚本将本地变量传递给远程?

ssh remotecluster 'bash -s' << EOF
> export TEST="sdfsd"
> echo $TEST
> EOF
Run Code Online (Sandbox Code Playgroud)

这不打印任何内容。

即使我将变量存储到文件中并将其复制到远程,它仍然不起作用。

TEST="sdfsdf"
echo $TEST > temp.par
scp temp.par remotecluster
ssh remotecluster 'bash -s' << EOF
> export test2=`cat temp.par`
> echo $test2
> EOF
Run Code Online (Sandbox Code Playgroud)

仍然没有打印任何内容。

所以我的问题是如何将本地变量作为变量传递给远程机器?

答案已在此给出

unix linux ssh bash cluster-computing

5
推荐指数
1
解决办法
1万
查看次数

Nodejs+socket.io:在重新连接到工作进程(集群模块)后防止回退到 xhr 轮询

每次工作进程死亡时,我都使用集群模块来派生一个新的工作人员。我的节点服务器和客户端通过 websockets (socket.io) 进行通信。我看到的是,在一个工人死亡并且客户端连接到一个新的工作进程之后,通信偶尔会回落到 xhr-polling。

所以在一个工人死之前:websockets。

工人死后:xhr-polling(有时。但为什么?。发生这种情况时,我会在重新连接时看到握手错误)

我已将传输选项配置为仅使用“websocket”,但这似乎没有帮助。

我还尝试按照此处的建议配置下面提到的参数。但这也无济于事。在重新连接到新工作人员后,我仍然偶尔会回退到 xhr 轮询。

  • tryTransportsOnConnectTimeout - 默认值为 true
  • 记住传输 - 默认值为 true

知道如何强制使用 websockets 吗?

提前致谢。

cluster-computing node.js socket.io

5
推荐指数
0
解决办法
1453
查看次数

nodejs 集群模块 - 地址使用错误

我有一个 express.js 应用程序,它必须在每次有特定请求时运行一个子进程(这里是: /compute/real-time )。将有用户创建的脚本来计算数据。所以,我使用节点集群模块来创建一个工作池并选择一个可以自由执行脚本的工作。但是我在创建集群本身的过程中遇到了麻烦。这是代码 clusterPool.js

var cluster = require('cluster');
exports.setupCluster = function(){
console.log ("Setting up cluster for bot processing " )
  if (cluster.isMaster){
    cluster.fork();   //one is good enough at the moment
  }
}
Run Code Online (Sandbox Code Playgroud)

计算.js

var async = require('async');
var clusterPool = require('.././clusterPool')
//Start the cluster
clusterPool.setupCluster();
exports.computeRealTime = function(req,res){
    clusterPool.cluster.on("listening",function(worker){
        //....Do something with the worker
    })
}
Run Code Online (Sandbox Code Playgroud)

网络服务器.js

// Include Express
var express = require('express');
var compute = require('.././compute');

// Create a new Express application
var app = express(); …
Run Code Online (Sandbox Code Playgroud)

javascript cluster-computing node.js express

5
推荐指数
1
解决办法
1850
查看次数

在 Docker 容器中运行 Node.js 分支进程

我正在考虑使用Docker,因此试图找到尽可能多的关于它与Node.js应用程序集成的信息。

在生产中,我的应用程序运行 Node.jscluster模块到fork()新进程和domain模块来捕获错误,处理它们,然后是fork()新进程。

(官方示例:“警告:不要忽略错误!”)

我的问题如下:

  • 我如何能够将每个新的fork()'ed 进程放入 Docker 容器中?

  • 如果不可能,是否有任何替代方法可以让我从中获取错误捕获/处理功能,例如pm2或forever与 docker 兼容?

也欢迎任何其他有关 Node.js 应用程序的 Docker 良好实践的资源!

先感谢您 !

cluster-computing production-environment node.js forever docker

5
推荐指数
0
解决办法
1347
查看次数

提交到 Spark 集群时出现 FileNotFoundException

我使用 Apache Spark 创建了一个小应用程序,当我在本地运行该应用程序时,一切正常。但是当我将它提交到一个 6 节点集群时,我得到一个 FileNotFoundException,因为他找不到输入文件。

这是我的小应用程序。

def main (args: Array[String]) {
  val sparkContext = new SparkContext(new SparkConf())
  val tweets = sparkContext.textFile(args(0))

  tweets.map { line => (line, LanguageDetector.create().detect(line)) }
     .saveAsTextFile("/data/detected")
}
Run Code Online (Sandbox Code Playgroud)

我使用以下命令提交申请:

/opt/spark-1.0.2-bin-hadoop2/bin/spark-submit --class YarnTest --master spark://luthor-v1:7077 lang_detect.jar twitter_data 
Run Code Online (Sandbox Code Playgroud)

提交后,我收到以下异常:

Exception in thread "main" org.apache.spark.SparkException: Job aborted due to stage failure: Task 0.0:1 failed 4 times, most recent failure: Exception failure in TID 6 on host luthor-v5: java.io.FileNotFoundException: File file:/opt/bb/twitter_data does not exist
Run Code Online (Sandbox Code Playgroud)

文件肯定在那里,jar和文件在同一目录中,它可以解析完整路径。

提前致谢

scala filenotfoundexception cluster-computing apache-spark

5
推荐指数
1
解决办法
5063
查看次数

从 nimbus 下载 jar 的 Storm 主管连接错误

我正在设置一个多节点风暴集群。所以我有 3 个 zookeeper 节点,1 个 nimbus,2 个主管和 1 个 Storm 客户端节点。因此,当我查看我与 zookeeper 和 nimbus 以及 zookeeper 和主管的配置时,一切似乎都很好。但是当主管试图从 nimbus 数据目录中拉下 jar 文件时,主管会收到“连接被拒绝”。出于沮丧,我什至打开了盒子之间的 tcp 和 udp 端口​​(0-65535),但最终还是连接被拒绝。

我已经验证了 nimbus 数据目录的权限非常开放,主管应该能够进入该目录并将文件拉下来。这是日志。

Nimbus.log:

2014-11-23 07:07:50 b.s.zookeeper [INFO] Zookeeper state update: :connected:none
2014-11-23 07:07:50 o.a.z.ClientCnxn [INFO] EventThread shut down
2014-11-23 07:07:50 o.a.z.ZooKeeper [INFO] Session: 0x249d964a3c20008 closed
2014-11-23 07:07:50 c.n.c.f.i.CuratorFrameworkImpl [INFO] Starting
2014-11-23 07:07:50 o.a.z.ZooKeeper [INFO] Initiating client connection, connectString=172.31.40.214:2181,172.31.45.110:2181,172.31.47.13:2181/storm sessionTimeout=20000 watcher=com.netflix.curator.ConnectionState@40160f3d
2014-11-23 07:07:50 o.a.z.ClientCnxn [INFO] Opening socket connection to server /172.31.40.214:2181
2014-11-23 07:07:50 o.a.z.ClientCnxn …
Run Code Online (Sandbox Code Playgroud)

cluster-computing amazon-web-services apache-storm

5
推荐指数
1
解决办法
1962
查看次数

从 powershell 向集群添加通用服务

我是集群的新手,我正在尝试使用 PowerShell 为集群创建通用服务。我可以使用 GUI 添加它而不会出现任何问题,但由于某种原因,我无法从 PowerShell 添加它。

按照Add-ClusterGenericServiceRole文档中的第一个示例,我尝试了以下命令:

Add-ClusterGenericServiceRole -ServiceName "MyService"
Run Code Online (Sandbox Code Playgroud)

这会引发以下错误:

Static network was [network range] was not configured. Please use -StaticAddress to use this network or -IgnoreNetwork to ignore it. 
Run Code Online (Sandbox Code Playgroud)

网络和我的服务之间有什么联系?为什么从 GUI 创建它时不需要这些细节?

我还尝试了另一种方法,使用以下方法创建资源:

Add-ClusterResrouce -Name MyService -ResourceType "Generic Serice"
Run Code Online (Sandbox Code Playgroud)

此命令成功,但我在 GUI 中注意到 ServiceName 为空,因此无法启动实际服务。如果我能以某种方式更改 ServiceName 属性,它应该可以解决问题。同样,在 PowerShell 中,我尝试了以下操作:

$resource = Get-ClusterResrouce "MyService"
$Resource.ServiceName = "Actual name of service" //property ServiceName cannot be found on this object.
Run Code Online (Sandbox Code Playgroud)

我已经挣扎了几个小时,但没有运气。我缺少一些基本的东西吗?我认为这不应该像看起来那么复杂。

generics powershell service failover cluster-computing

5
推荐指数
1
解决办法
3766
查看次数

尝试启动 mesos-slave 时出现“nodename 或 servname 提供”

我正在遵循这个关于在本地安装 Mesos 的简单指南https://mesosphere.com/2014/07/07/installing-mesos-on-your-mac-with-homebrew/

我能够启动一个 mesos master,并且能够在 localhost:5050 上看到 master 的控制台非常好。但是,当我尝试使用 sudo /usr/local/sbin/mesos-slave --master=127.0.0.1:5050 启动一个新从站时,它给了我

警告:在 InitGoogleLogging() 写入 STDERR F0328 16:14:45.329051 2041414416 process.cpp:889] 之前的日志记录未提供 nodename 或 servname,或未知 * 检查失败堆栈跟踪:*

任何帮助将不胜感激,谢谢

ssh installation cluster-computing bigdata mesos

5
推荐指数
1
解决办法
4081
查看次数