Mar*_*ark 5 curl r rstudio google-bigquery
我有几个用 R 编写的程序,它们使用 bigrquery 来运行查询、表删除和上传数据。这些都是在 Windows 7 机器上使用 R 版本 3.3.1 在 R studio 中编写的。一遍又一遍地运行它们根本没有问题。
一位新员工正试图在 Windows 10 上运行完全相同的程序。基本 R 和 R 工作室的相同版本。这些软件包都安装得很好,没有任何类型的错误。但是通过代码发送给bigquery的命令(即query_exec、insert_upload_job)会提交,但是挂了几分钟,然后返回如下错误:
curl::curl_fetch_memory(url, handle = handle) 中的错误:HTTP/2 帧层中的流错误
这些查询通常在 2 秒内运行。这些命令在同一台机器上的 base R 中运行速度很快,没有错误。
我家里有一台 Windows 10 笔记本电脑,所以我以相同的方式安装了所有东西,它显示了相同的行为。这些命令在基本 R 中运行良好,但在返回上述错误之前在 R Studio 中“挂起”了几分钟。
奇怪的是,相同的命令在 R Studio 中定期运行良好,但大多数时候我们都会收到错误消息。
我找了这个问题,发现:r-hub/rhub#32
但我无法弄清楚如何在客户端关闭 http2 以查看是否有帮助。
我注意到的一件事是,当我使用以下命令检查 curl 版本时: curl::curl_version() 它在我的 Windows 7 机器上显示版本 7.47.1(工作的机器)并且它没有显示 http2 值。
在 Windows 10 机器上,它显示 curl 版本 7.53.1,并显示一个 http2=TRUE 参数。
我一直无法弄清楚如何在 Win10 机器上弃用 curl 版本以查看是否可以解决问题。
无论如何,我想如果这是最新版本的问题,其他人也会遇到同样的问题。
我也将此发布到 bigrquery github 问题页面,但到目前为止没有人回应。
任何帮助表示赞赏!
无需降级curl即可解决HTTP2 成帧层中的错误。相反,您可以使用以下方法之一来设置特定的http_version.
对于那些使用该包的人httr,您可以直接指定首选的 HTTP 版本,如下所示:
# 0 stands for CURL_HTTP_VERSION_NONE (see http_version values below)
httr::set_config(httr::config(http_version = 0))
Run Code Online (Sandbox Code Playgroud)
此处建议了此解决方法。
此处的curl包小插图中提供了如何直接使用设置选项的另一个(较低级别)示例。摘录:
h <- curl::new_handle()
curl::handle_setopt(h, http_version = 0)
# then use the handle to make a request
# see curl vignettes for an example
Run Code Online (Sandbox Code Playgroud)
有关RCurl示例,请参阅RCurl 中的 TLS v1.1 / TLS v1.2 支持。
GitHub 上的curl 头文件中定义的C 枚举中提供了curl HTTP 版本号(链接指向较旧的提交):
enum {
CURL_HTTP_VERSION_NONE, /* 0, setting this means we don't care, and that we'd
like the library to choose the best possible
for us! */
CURL_HTTP_VERSION_1_0, /* 1, please use HTTP 1.0 in the request */
CURL_HTTP_VERSION_1_1, /* 2, please use HTTP 1.1 in the request */
CURL_HTTP_VERSION_2_0, /* 3, please use HTTP 2 in the request */
CURL_HTTP_VERSION_2TLS, /* 4, use version 2 for HTTPS, version 1.1 for HTTP */
CURL_HTTP_VERSION_2_PRIOR_KNOWLEDGE, /* 5, please use HTTP 2 without HTTP/1.1
Upgrade */
CURL_HTTP_VERSION_LAST /* 6, *ILLEGAL* http version */
};
Run Code Online (Sandbox Code Playgroud)
我通过执行以下步骤创建了一个解决方法:
删除了我的基本 R win-library 子文件夹中的curl文件夹(当我尝试安装旧版本的curl时,它无法自动删除当前版本)
安装curl版本0.9.7(该版本不使用http2)
install.packages("https://cloud.r-project.org/bin/windows/contrib/3.1/curl_0.9.7.zip", repos=NULL,type="source")
Run Code Online (Sandbox Code Playgroud)运行curl::curl_version()确认没有http2参数。
从长远来看,仍然需要有人来解决这个问题。我已将其发布在 bigrquery 的 github 存储库上,但我不确定他们是否需要修复它,或者修复是否需要在curl() 函数中进行。
| 归档时间: |
|
| 查看次数: |
3761 次 |
| 最近记录: |