小编nut*_*les的帖子

PHP Dom Documents:获取textContent忽略脚本标记和注释

我使用dom doc从数据库加载html,如下所示:

$doc = new DOMDocument();
@$doc->loadHTML($data);
$doc->encoding = 'utf-8';
$doc->saveHTML();
Run Code Online (Sandbox Code Playgroud)

然后我通过这样做得到正文:

$bodyNodes = $doc->getElementsByTagName("body");
$words = htmlspecialchars($bodyNodes->item(0)->textContent);
Run Code Online (Sandbox Code Playgroud)

我得到的一切都包括在内<body>.类似的事情<scripts>也包括在内.我如何删除它们并仅保留真实文本内容?

php xml dom

5
推荐指数
2
解决办法
3119
查看次数

Java - 自动将所有null String设置为空String

我的程序从外部源获取数据并将其设置为我自己创建的POJO类.一些外部数据返回null,而其他外部数据返回空String.外部数据有一些不一致,这就是为什么我要标准化这部分程序

我正在创建一个使用java jersey的web服务,使用Google Gson将这些POJO类转换为json.如果String值为null,则gson不会将成员变量设置为返回的json字符串.这会使使用Web服务的开发人员感到困惑,因为某些记录不会有某些变量.我可以在每个pojo setter中编写一些代码来检查null并将其设置为空String.但我将介绍样板代码

在eclipse中,我尝试使用代码模板在setter中检查null String并将其转换为空String.

if (${param} instanceof String)
    ${field} = (${param} == null ? "" : ${param});    
else
    ${field} = ${param};
Run Code Online (Sandbox Code Playgroud)

但是,如果输入类型是int,则不起作用.

我可以为String输入自定义代码模板吗?还有其他方法可以自动执行此操作吗?

java string

5
推荐指数
1
解决办法
1225
查看次数

url中的未知字符%252B

我有一个页面链接来自rss.他们是:断链

http://news.asiaone.com/News/Latest%252BNews/Singapore/Story/A1Story20121220-390687.html
Run Code Online (Sandbox Code Playgroud)

工作环节

http://news.asiaone.com/News/Latest%2BNews/Singapore/Story/A1Story20121220-390687.html
Run Code Online (Sandbox Code Playgroud)

我意识到它的工作原理是将%252B更改为%2B.即时通讯使用PHP.有没有办法在跑步中检测并纠正它?

php encoding ascii urlencode

4
推荐指数
2
解决办法
8397
查看次数

python-如何爬过__VIEWSTATE

我实现了一个简单的python爬虫.我在.aspx网站上测试并意识到它没有爬过去<input type="hidden" name="__VIEWSTATE" id="__VIEWSTATE" value="/wEPDwUKLTc2MzAxM..." />

__VIEWSTATE的值超长.下面的每个html标签都没有被抓取.这是我的抓取工具:

try:
    # For python 3.0 and later
    from urllib.request import Request, urlopen, URLError
except ImportError:
    # Fall back to python 2's urllib2
    from urllib2 import Request, urlopen, URLError

from HTMLParser import HTMLParser

url = "http://tickets.cathay.com.sg/index.aspx"
response = urlopen(url)
html = response.read()

# Create a subclass and override the handler methods
class MetaParser(HTMLParser):
    def handle_starttag(self, tag, attrs):
        print "Encountered a start tag:", tag
        for attr in attrs:
            print("attr:",attr)

        if tag == "img":
            for …
Run Code Online (Sandbox Code Playgroud)

python viewstate web-crawler python-2.7

4
推荐指数
1
解决办法
2475
查看次数

位置<form:radiobuttons>垂直

我正在使用Spring MVC <form:radiobuttons>来显示单选按钮:

<form:radiobuttons path="selection" items="${arraySelection}" />
Run Code Online (Sandbox Code Playgroud)

但是,它会水平显示它们.生成的HTML如下:

<span>
 <input id="selection1" type="radio" value="0"" name="selection">
 <label for"selection1">Off</label>
</span>
<span>
 <input id="selection2" type="radio" value="1"" name="selection">
 <label for"selection2">On</label>
</span>
Run Code Online (Sandbox Code Playgroud)

如何垂直显示它们?

html css jsp spring-mvc

3
推荐指数
1
解决办法
2595
查看次数

java build ant文件与外部jar文件

我创建了一个ant构建文件来将我的java src编译成.jar文件.它使用外部jar文件.

我的文件目录:

+src
----android
------------Address.java
------------HelloServer.java
------------HelloServerResource.java
+lib
------------org.codehaus.jackson.core.jar
------------org.codehaus.jackson.mapper.jar
------------org.json.jar
------------org.restlet.ext.jackson.jar
------------org.restlet.jar
build.xml
Run Code Online (Sandbox Code Playgroud)

外部库位于lib文件夹中.主类在HelloServer.java中

这是我的ant构建文件:

<project name="helloworld">
    <property name="src-dir" location="src"/>
    <property name="build-dir" location="build"/>
    <property name="classes-dir" value="${build-dir}/classes"/>
    <property name="dist-dir" location="dist"/>
    <property name="lib-dir" value="lib"/>
    <property name="jar-dir"     value="${build-dir}/jar"/>
    <property name="main-class"  value="android.HelloServer"/>

    <path id="classpath">
        <fileset dir="${lib-dir}" includes="**/*.jar"/>
    </path>

    <target name="clean" description="compile the source">
        <delete dir="${build-dir}" />
        <delete dir="${dist-dir}" />
    </target>

    <target name="cleanall" depends="clean"/>

    <target name="init">
        <!-- Create the build directory structure used by compile -->
        <mkdir dir="${build-dir}"/>
        <mkdir dir="${classes-dir}"/>
        <mkdir dir="${jar-dir}"/>
        <!--<mkdir …
Run Code Online (Sandbox Code Playgroud)

java ant build

3
推荐指数
1
解决办法
9673
查看次数

python:Mac OS X.malloc 错误。未分配被释放的指针。中止陷阱 6

我正在运行一个多线程 python 脚本。它的作用是抓取网络并将其插入/更新到 mysql 中。这是我的代码

mythread.py

import threading
import time

class MyThread (threading.Thread):
    def __init__(self, threadID, threadname, q):
        threading.Thread.__init__(self)
        self.threadID = threadID
        self.threadname = threadname
        self.queue = q
        self.__exitFlag = False
        self.__signal_lock = threading.Lock()

    def run(self):
        print "Starting " + self.threadname
        self.process_data()
        print "Exiting " + self.threadname

    def stop(self):
        with self.__signal_lock:
            self.__exitFlag = True

    def process_data(self):
        while not self.__exitFlag:
            if not self.queue.empty():
                data = self.queue.get()
                # crawl data from the web...
                # update to mysql
                # assuming we have already …
Run Code Online (Sandbox Code Playgroud)

python python-multithreading

3
推荐指数
1
解决办法
7730
查看次数

SQLAlchemy查询如何使用MySQL的REGEXP运算符?

这个SQL查询怎么样:

SELECT * from table where field REGEXP 'apple|banna|pear';
Run Code Online (Sandbox Code Playgroud)

用SQLAlchemy编写?

我的基本查询如下所示:

query = session.query(TableFruitsDTO)
Run Code Online (Sandbox Code Playgroud)

python sqlalchemy

3
推荐指数
1
解决办法
1950
查看次数

Django REST Framework - 获取相关对象

I have these models where one book can have many contents in different languages:

class Book(models.Model):
    id = models.UUIDField(primary_key=True, default=uuid.uuid4, editable=False)
    title = models.CharField(max_length=255)

class BookContent(models.Model):
    id = models.UUIDField(primary_key=True, default=uuid.uuid4, editable=False)
    book = models.ForeignKey(Book, on_delete=models.CASCADE)
    content = models.TextField()
    language = models.TextField()
Run Code Online (Sandbox Code Playgroud)

--------------------Update--------------------

How should i fetch Book and its related BookContent such that the result JSON looks like the following?

{
    "results": [
        {
            "id": "d3e5185a-1b7b-427c-bbe3-030bfa2e3bce",
            "title": "My Book Title",            
            "book_content": [
                {
                    "id": "0fea8027-3ecf-4571-a95f-5a09a93408ec",
                    "content": "hello content 1",
                    "language": …
Run Code Online (Sandbox Code Playgroud)

django django-models django-views django-rest-framework

3
推荐指数
2
解决办法
1553
查看次数

在 MongoDB 文本搜索中禁用停用词过滤

我想知道是否可以在 MongoDB 文本搜索中仅禁用停用词过滤。有时我只想搜索“you”、“I”、“was”等词。我仍然想利用词干。只是不是停用词过滤。

db.collection.find({$text: {$search: "you"}})

以上不会返回任何结果。

但是像这样的传统方法

db.collection.find({shortDescription: new RegExp(".*you.*",'i')}) 会给我我想要的。

那么,我怎样才能在进行文本搜索的同时还能搜索这些词(停用词)。

javascript mongodb node.js

3
推荐指数
2
解决办法
1981
查看次数