我正在 databricks 笔记本上为多个数据集(大约 500 个)运行 R 脚本。我按文件大小对数据集进行排序,以避免错误,并在最短的时间内运行最大数量的文件,因为脚本的时间复杂度很高。
我能够毫无问题地完成 400/500 数据集,但大文件不断给出错误:
RserveException:评估失败
评估失败
该错误的奇怪之处在于,有时当我再次运行笔记本时,对于同一数据集,它可以正常工作而不会出现任何问题。然而,99% 的情况下,对于较大的文件我都会遇到相同的错误。展开错误码时没有任何错误码,也没有任何解释。我研究了这个问题,大多数人都有这个错误并带有错误代码,据我所知,这与 R 版本或我安装的一些库(集群范围)有关,但我无法弄清楚。
有任何想法吗?