小编lix*_*nso的帖子

Google Cloud Run 有一天会支持 GPU/TPU 吗?

到目前为止,Google Cloud Run 支持 CPU。有支持GPU的计划吗?如果 GPU 可用,那就太酷了,然后我可以演示 DL 项目,而无需真正运行超级昂贵的 GPU 实例。

google-cloud-run

11
推荐指数
2
解决办法
1845
查看次数

如何在不重新启动oozie作业的情况下重新加载oozie作业配置文件

我想知道是否有办法重新加载oozie作业的配置文件而不重新启动oozie作业(协调员).

因为协调器实际上运行了许多任务,所以有时我们只需要更改作业配置文件的一行,然后进行更新,而不会干扰其他任务.

非常感谢你.

apache hadoop hbase hive oozie

6
推荐指数
3
解决办法
6087
查看次数

org.apache.hadoop.mapreduce.counters.LimitExceededException:计数器太多:121 max = 120

我正在运行一个hadoop工作(来自oozie),它有很少的计数器和多输出.

我得到的错误如:org.apache.hadoop.mapreduce.counters.LimitExceededException:太多计数器:121 max = 120

然后我删除了所有具有计数器的代码,并将mout.setCountersEnabled设置为false.并且还在hadoop配置中将最大计数器设置为240.

现在我仍然得到相同的错误org.apache.hadoop.mapreduce.counters.LimitExceededException:太多计数器:241 max = 240

我怎么解决这个问题?是否存在任何隐藏计数器的可能性?我怎样才能弄清楚那里的柜台超过240?(在我打印任何东西之前,这个过程看起来好像停了?)

谢谢,新松

java apache hadoop mapreduce oozie

5
推荐指数
1
解决办法
3920
查看次数

在哪里可以找到Hadoop用户的"组"名称

用户'rok'上传文件并将权限设置为770. hdfs上的文件如下所示:" - rw-rw ---- 3 rok hdfs filename1"

我正在使用'ksc'用户来消费'rok'用户上传的数据.首先,我想确认我是否拥有该文件"filename1"的权限.

在哪里可以找到我的用户'ksc'的'组'名称?我是否属于hadoop中的'hdfs'组?

顺便说一句,如果我上传一个文件到hadoop,文件权限如:" - rw-r - r-- 3 ksc ksc filename2"

我的Linux'ksc'用户的本地信息是:uid = 504(ksc)gid = 502(ksc)groups = 502(ksc)

hadoop hdfs

3
推荐指数
2
解决办法
1万
查看次数

Google Cloud Run的默认存储是什么?

我没有关于Google Cloud Run拥有的存储的文档。例如,当我们创建虚拟机时,它是否包含很少的千兆字节存储?如果没有,是否存在一个“ / tmp”文件夹,可以在请求期间将数据临时放入其中?有什么限制(如果有)?

如果它们都不可用,如果我想在运行Cloud Run时保存一些临时数据,有何建议?

google-cloud-run

2
推荐指数
2
解决办法
628
查看次数

Bash"source"命令返回错误的连接字符串

我有一个像这样的配置文件:

//filename : stat.conf
LAS_SERVER="127.0.0.1"
LAS_PORT=3306
LAS_USER=root
LAS_PWD=root
LAS_DB=test
CONN_STR_LAS_DB="-h$LAS_SERVER -P$LAS_PORT -u$LAS_USER -p$LAS_PWD $LAS_DB"
Run Code Online (Sandbox Code Playgroud)

现在我source像这样运行命令:

$ source ./stat.conf

$ echo $CONN_STR_LAS_DB
testot.0.1
Run Code Online (Sandbox Code Playgroud)

你可以看到结果是错误的.不符合我们的期望.

相反,如果我在shell中运行命令,我可以得到正确的结果:

$ LAS_SERVER="127.0.0.1"
$ LAS_PORT=3306
$ LAS_USER=root
$ LAS_PWD=root
$ LAS_DB=test
$ CONN_STR_LAS_DB="-h$LAS_SERVER -P$LAS_PORT -u$LAS_USER -p$LAS_PWD $LAS_DB"
$ echo $CONN_STR_LAS_DB
-h127.0.0.1 -P3306 -uroot -proot test
Run Code Online (Sandbox Code Playgroud)

这是正确的结果.

所以,我的问题是:为什么我在使用"source ./stat.conf"时得到了错误的结果?

我在另一台计算机上测试了相同的操作,我可以得到正确的结果.有什么我错过了在我的电脑上配置?

我的操作系统是CentOS 5.

linux bash shell redhat centos

0
推荐指数
1
解决办法
399
查看次数

标签 统计

hadoop ×3

apache ×2

google-cloud-run ×2

oozie ×2

bash ×1

centos ×1

hbase ×1

hdfs ×1

hive ×1

java ×1

linux ×1

mapreduce ×1

redhat ×1

shell ×1