小编Sun*_*ing的帖子

从Python在网页上执行Javascript方法

我正在为特定的网页编写一个Web抓取器,我正在使用"urllib2.Request(MyURL)"和"BeautifulSoup"进行此操作,但问题是MyURL中有一个Paging页面并且下一页加载(在相同的myURL中)/page)通过点击链接,此链接后面是javascript方法写的

{ javascript:__doPostBack('rptPagingBottom$ctl01$btnPage','') }.
Run Code Online (Sandbox Code Playgroud)

现在没有从Python执行这个Javascript函数,我无法获得完整的页面列表.如何从Python调用此Javascript方法以便我可以获取该网页的所有页面?

我在这里找到了一个相关的问题,建议使用(Rhino,V8,SeaMonkey),但我根本没有得到这个.如果有可能,我需要一些示例代码.

javascript python web-scraping

8
推荐指数
1
解决办法
5683
查看次数

标签 统计

javascript ×1

python ×1

web-scraping ×1