Node.js puppeteer - 如何设置导航超时？

Question

我正在使用node.js和puppeteer来获取一些数据.我正在打开的一些文件很大......然后我收到一个错误:

错误:

our error { TimeoutError: Navigation Timeout Exceeded: 30000ms exceeded
    at Promise.then (/project/node_modules/puppeteer/lib/NavigatorWatcher.js:74:21)
    at <anonymous> name: 'TimeoutError' }

如何忽略它或设置更高的超时？

那是我的剧本:

await page.goto('url'+tableCell04Val, {waitUntil: 'load'});

Answer 1

timeout: 0如果您正在加载繁重的页面,则可以使用禁用的超时错误.

在你的page.goto喜欢中使用它:

await page.goto('url'+tableCell04Val, {waitUntil: 'load', timeout: 0});

您可以在此处看到对Pupeteer进行的PR,其中添加了更改,以及文档和实现它的单元测试.

Answer 2

在 Puppeteer 中有两种处理超时的方法：

一种） page.setDefaultNavigationTimeout(timeoutInMiliseconds)

它会影响与导航相关的功能：

•   page.goBack([options])
•   page.goForward([options])
•   page.goto(url[, options])
•   page.reload([options])
•   page.setContent(html[, options])
•   page.waitForNavigation([options])

b) page.setDefaultTimeout(timeoutInMiliseconds)

它会影响所有以前的导航功能以及所有等待功能：

•   page.waitFor(selectorOrFunctionOrTimeout[, options[, ...args]])
•   page.waitForFunction(pageFunction[, options[, ...args]])
•   page.waitForRequest(urlOrPredicate[, options])
•   page.waitForResponse(urlOrPredicate[, options])
•   page.waitForSelector(selector[, options])
•   page.waitForXPath(xpath[, options])

注意：page.setDefaultNavigationTimeout优先于page.setDefaultTimeout

Answer 3

更新2019

从V1.0.0开始，您还可以更改页面行为：

await page.setDefaultNavigationTimeout(0); 

参数是超时（以毫秒为单位）。

参考：https : //github.com/GoogleChrome/puppeteer/blob/master/docs/api.md#pagesetdefaultnavigationtimeouttimeout https://pptr.dev/#?product=Puppeteer&version=v1.17.0&show=api-pagesetdefaultnavigationtimeouttimeout

Answer 4

您可以像这样设置超时

await page.goto('url'+tableCell04Val, {waitUntil: 'load', timeout: 10000}).then(() => {
    console.log('success')
}).catch((res) => {
    console.log('fails', res)
})

Answer 5

puppeteer 超时的默认值为 30 秒。要使用自定义超时，您可以使用 setDefaultNavigationTimeout 和 setDefaultTimeout 方法或 options 参数中的 timeout 属性。所有情况下的等待时间均以毫秒为单位指定。

await page.setDefaultNavigationTimeout(60000);

例如

const page = await browser.newPage();            
await page.setDefaultNavigationTimeout(60000); //timeout 60 seconds now

传递 0 以禁用超时

await page.setDefaultNavigationTimeout(0); 

Answer 6

await page.goto('url'+tableCell04Val, {  waitUntil: 'networkidle2',timeout: 0});

networkidle2 对于进行长轮询或任何其他辅助活动的页面非常方便。

检查https://github.com/puppeteer/puppeteer/issues/1552#issuecomment-350954419