如何使用正则表达式解析Java中的HTML?

Ric*_*ras 14 java regex

有人可以告诉我一个简单的方法在Java中使用正则表达式在html文件中找到href和src标签吗?
然后,如何获取与标记关联的URL?

谢谢你的任何建议.

Dav*_*ebb 53

使用正则表达式从HTML中提取值总是一个错误.它可能首先出现的HTML语法要复杂得多,而且即使是非常复杂的正则表达式,页面也很容易识别出来.

请改用HTML Parser.另请参阅主要Java HTML解析器的优缺点是什么?

  • 这取决于你在做什么.如果您正在处理来自随机源的大量HTML,则HTML Parser可能会失败,并且可能需要比正则表达式更多的内存和处理.例如,Heritrix网络爬虫使用正则表达式在HTML页面上进行链接提取. (3认同)
  • 我不同意这个答案,在 html 上使用正则表达式绝不总是一个错误 - 正如 @Kris 指出的那样:尝试解析完整的 html 文档通常需要有效的 html,但并不总是给出。当您有明确定义的情况(例如查找 <a> 标记的 href 属性值)时,它会带来巨大的杀伤力。 (2认同)

Hen*_*sek 21

其他答案都是真的.Java Regex API不是实现目标的合适工具.使用其他答案中提到的高效,安全且经过良好测试的高级工具.

如果您的问题涉及Regex API而不是现实生活中的问题(例如学习目的) - 您可以使用以下代码执行此操作:

String html = "foo <a href='link1'>bar</a> baz <a href='link2'>qux</a> foo";
Pattern p = Pattern.compile("<a href='(.*?)'>");
Matcher m = p.matcher(html);
while(m.find()) {
   System.out.println(m.group(0));
   System.out.println(m.group(1));
}
Run Code Online (Sandbox Code Playgroud)

输出是:

<a href='link1'>
link1
<a href='link2'>
link2
Run Code Online (Sandbox Code Playgroud)

请注意懒惰/不情愿的资格赛*?必须使用以减少分组到单个标记.组0是整个匹配,组1是下一组匹配(下一对括号).


mP.*_*mP. 7

不要使用正则表达式使用NekoHTML或TagSoup,这是一个提供SAX或DOM的桥梁,就像在XML方法中访问HTML文档一样.


Sco*_*wan 5

如果你想沿着html解析路线走下去,Dave和我推荐这里的代码来解析锚点标签的字符串数据并打印它们的href.

因为你只是使用锚标签,你应该只使用正则表达式,但如果你想做更多,请使用解析器.在Mozilla的HTML解析器是最好的了.

File parserLibraryFile = new File("lib/MozillaHtmlParser/native/bin/MozillaParser" + EnviromentController.getSharedLibraryExtension());
                String parserLibrary = parserLibraryFile.getAbsolutePath();
                //  mozilla.dist.bin directory :
                final File mozillaDistBinDirectory = new File("lib/MozillaHtmlParser/mozilla.dist.bin."+ EnviromentController.getOperatingSystemName());

        MozillaParser.init(parserLibrary,mozillaDistBinDirectory.getAbsolutePath());
MozillaParser parser = new MozillaParser();
Document domDocument = parser.parse(data);
NodeList list = domDocument.getElementsByTagName("a");

for (int i = 0; i < list.getLength(); i++) {
    Node n = list.item(i);
    NamedNodeMap m = n.getAttributes();
    if (m != null) {
        Node attrNode = m.getNamedItem("href");
        if (attrNode != null)
           System.out.println(attrNode.getNodeValue());
Run Code Online (Sandbox Code Playgroud)