相关疑难解决方法(0)

使用lxml.html解析HTML时,相当于InnerHTML

我正在使用lxml.html编写一个脚本来解析网页.我在我的时间里做了很多BeautifulSoup,但由于它的速度,我现在正在尝试lxml.

我想知道库中最明智的方法是做相当于Javascript的InnerHtml - 即检索或设置标签的完整内容.

<body>
<h1>A title</h1>
<p>Some text</p>
</body>
Run Code Online (Sandbox Code Playgroud)

因此InnerHtml是:

<h1>A title</h1>
<p>Some text</p>
Run Code Online (Sandbox Code Playgroud)

我可以使用黑客(转换为字符串/正则表达式等)来做到这一点,但我假设有一个正确的方法来使用由于不熟悉我缺少的库.谢谢你的帮助.

编辑:感谢pobk如此快速有效地向我展示了这方面的方法.对于任何尝试相同的人,这是我最终得到的:

from lxml import html
from cStringIO import StringIO
t = html.parse(StringIO(
"""<body>
<h1>A title</h1>
<p>Some text</p>
Untagged text
<p>
Unclosed p tag
</body>"""))
root = t.getroot()
body = root.body
print (element.text or '') + ''.join([html.tostring(child) for child in body.iterdescendants()])
Run Code Online (Sandbox Code Playgroud)

请注意,lxml.html解析器将修复未关闭的标记,因此请注意这是否存在问题.

python parsing lxml

24
推荐指数
2
解决办法
1万
查看次数

如何通过XPath查找具有两个可能类名的元素?

如何使用XPath表达式查找具有两个可能类名的元素?

我正在使用Python,Selenium我希望找到所有class具有两个可能名称之一的元素.

  1. class ="item ng-scope highlight"
  2. class ="item ng-scope"

'//div[@class="list"]/div[@class="item ng-scope highlight"]//h3/a[@class="ng-binding"]'

当然,我可以进行两次单独的搜索,并将结果连成一个列表.但是有一种更简单有效的方法.也许通过使用|.

python selenium xpath

4
推荐指数
1
解决办法
1999
查看次数

标签 统计

python ×2

lxml ×1

parsing ×1

selenium ×1

xpath ×1