小编tde*_*roc的帖子

Amazon MWAA Airflow - 任务容器在没有日志的情况下关闭/停止/终止

我们使用 Amazon MWAA Airflow,很少有任务标记为“FAILED”,但根本没有日志。就好像容器在我们没有注意到的情况下被关闭了一样。

我找到了这个链接: https://cloud.google.com/composer/docs/how-to/using/troubleshooting-dags#task_fails_without_emitting_logs 这由机器上的 OOM 解释。但我们的任务几乎不使用 CPU 和 RAM。他们只对 AWS API 进行 1 次 HTTP 调用。非常轻。

在 Cloudwatch 上,我可以看到同一容器上没有启动其他任务(DAG 运行通过打印容器 IP 启动,因此我可以在所有任务上搜索该 IP)。

如果有人有想法,那就太好了,谢谢!

amazon-web-services airflow mwaa

5
推荐指数
1
解决办法
3468
查看次数

Solr Cloud - Solr 挂起/无法启动或无法完全创建集合:<collection_name>

我创建/删除 Solr 集合不再起作用。当我启动一个创作(通过curl)时,我得到以下答案(30秒后):

Error 500 - Could not fully create collection: <collection_name>

编辑:我还有一次,同样的问题:Solr 无法完全重新启动,或者挂起。

HDP:2.6.2
Solr(云):5.5.5
ZK:3.4.6

solr solrcloud

3
推荐指数
1
解决办法
2168
查看次数

Azure ADLSGEN2 - API 错误 400 - DatalakeStorageException 请求 URI 无效

我正在使用 Azure SDK (Java) 在 ADLSGEN2 中创建目录、上传文件、移动文件。

我的输入非常简单,如下所示:

path : /path/to/fileOrFolder

但我收到以下错误:

com.azure.storage.file.datalake.models.DatalakeStorageException: Status Error code 400: The request URI is invalid ...
Run Code Online (Sandbox Code Playgroud)

sdk azure azure-data-lake azure-data-lake-gen2

3
推荐指数
1
解决办法
1952
查看次数