TPP*_*PPZ 1 dom go web-scraping google-chrome-devtools chromedp
我正在尝试使用 Go 库 Chromedp 从网页中抓取一些数据。
我基本上需要单击一个按钮,例如 W3C 学校网站上的“Click me”按钮。我需要使用valueHTML 标记的 HTML 属性来过滤该按钮input(因为没有要定位的特定 ID,并且大多数 Chromedp 示例使用基于 ID 属性的选择器)。
以下代码似乎永远挂在初始网页上,无需单击按钮。
package main
import (
"context"
"log"
"time"
"github.com/chromedp/chromedp"
)
func main() {
var err error
// create context
ctxt, cancel := context.WithCancel(context.Background())
defer cancel()
// create chrome instance
c, err := chromedp.New(ctxt, chromedp.WithLog(log.Printf))
if err != nil {
log.Fatal(err)
}
// run task list
err = c.Run(ctxt, clickStuff())
if err != nil {
log.Fatal(err)
}
// shutdown chrome
err = c.Shutdown(ctxt)
if err != nil {
log.Fatal(err)
}
// wait for chrome to finish
err = c.Wait()
if err != nil {
log.Fatal(err)
}
log.Printf("DONE")
}
func clickStuff() chromedp.Tasks {
return chromedp.Tasks{
chromedp.Navigate(`https://www.w3schools.com/TAGS/tryit.asp?filename=tryhtml5_input_type_button`),
chromedp.Click(`input[@value='Click me']`, chromedp.NodeVisible),
chromedp.Sleep(5 * time.Second),
}
}
Run Code Online (Sandbox Code Playgroud)
另外,当运行上面的代码时,我看到了各种各样的日志,但基本上我看到这段日志被一遍又一遍地打印,这似乎表明标签不存在,但它确实存在,但我不知道知道如何确定选择器使用什么语法?
2019/03/23 17:43:01 <- {"id":25,"method":"DOM.performSearch","params":{"query":"input[@value='Click me']"}}
2019/03/23 17:43:01 -> {"id":25,"result":{"searchId":"1000014442.18","resultCount":0}}
Run Code Online (Sandbox Code Playgroud)
您可以使用 BySearch 选择器选择 html 属性:
chromedp.Click(`//*[@value="Click me"]`, chromedp.BySearch)
Run Code Online (Sandbox Code Playgroud)
| 归档时间: |
|
| 查看次数: |
8189 次 |
| 最近记录: |