我们使用 Amazon MWAA Airflow,很少有任务标记为“FAILED”,但根本没有日志。就好像容器在我们没有注意到的情况下被关闭了一样。
我找到了这个链接: https://cloud.google.com/composer/docs/how-to/using/troubleshooting-dags#task_fails_without_emitting_logs 这由机器上的 OOM 解释。但我们的任务几乎不使用 CPU 和 RAM。他们只对 AWS API 进行 1 次 HTTP 调用。非常轻。
在 Cloudwatch 上,我可以看到同一容器上没有启动其他任务(DAG 运行通过打印容器 IP 启动,因此我可以在所有任务上搜索该 IP)。
如果有人有想法,那就太好了,谢谢!
我创建/删除 Solr 集合不再起作用。当我启动一个创作(通过curl)时,我得到以下答案(30秒后):
Error 500 - Could not fully create collection: <collection_name>
编辑:我还有一次,同样的问题:Solr 无法完全重新启动,或者挂起。
HDP:2.6.2
Solr(云):5.5.5
ZK:3.4.6
我正在使用 Azure SDK (Java) 在 ADLSGEN2 中创建目录、上传文件、移动文件。
我的输入非常简单,如下所示:
path : /path/to/fileOrFolder
但我收到以下错误:
com.azure.storage.file.datalake.models.DatalakeStorageException: Status Error code 400: The request URI is invalid ...
Run Code Online (Sandbox Code Playgroud)