这种Python线程的使用安全/好吗？

Question

我有一个应用程序从某些网址获得一些结果,然后必须根据结果做出决定(即:选择最佳结果并将其显示给用户).由于我想查看几个网址,这是第一次非常需要多线程.

所以在一些例子的帮助下,我编写了以下测试代码:

import threading
import urllib2

threadsList = []
theResultList = []

def get_url(url):
    result = urllib2.urlopen(url).read()
    theResultList.append(result[0:10])

theUrls = ['http://google.com', ' http://yahoo.com']

for u in theUrls:
    t = threading.Thread(target=get_url, args=(u,))
    threadsList.append(t)
    t.start()
    t.join()

print theResultList

这似乎有效,但我真的很不安全,因为我真的没有多线程的经验.我总是听到这些术语,如"线程安全"和"竞争条件".

当然我读到了这些东西,但由于这是我第一次使用这样的东西,我的问题是:这样做可以吗？我忽略了任何负面或意外的影响吗？有办法改善这个吗？

欢迎所有提示!

Answer 1

当您有多个线程修改同一个对象时,您必须担心竞争条件.在你的情况下,你有这个确切的条件 - 所有线程都在修改theResultList.

但是,Python的列表是线程安全的 - 请在此处阅读更多内容.因此append,来自多个线程的列表不会以某种方式破坏列表结构 - 但是仍然需要注意保护对单个列表元素的并发修改.例如:

# not thread safe code! - all threads modifying the same element
def get_url(url):
    result = urllib2.urlopen(url).read()

    #in this example, theResultList is a list of integers
    theResultList[0] += 1

在你的情况下,你没有做这样的事情,所以你的代码很好.

旁注: 增加整数的原因不是线程安全的,因为它实际上是两个操作 - 一个操作来读取值,一个操作来增加值.一个线程可以在这两个步骤之间中断(由另一个也希望增加相同变量的线程) - 这意味着当线程最终在第二步中增加时,它可能会增加一个过时值.