python通过socket发送不完整的数据

Question

我有这个套接字服务器脚本,

import SocketServer
import shelve
import zlib

    class MyTCPHandler(SocketServer.BaseRequestHandler):
        def handle(self):
            self.words = shelve.open('/home/tipu/Dropbox/dev/workspace/search/words.db', 'r');
            self.tweets = shelve.open('/home/tipu/Dropbox/dev/workspace/search/tweets.db', 'r');

            param = self.request.recv(1024).strip()
            try:
                result = str(self.words[param])
            except KeyError:
                result = "set()"
            self.request.send(str(result))

    if __name__ == "__main__":
        HOST, PORT = "localhost", 50007
        SocketServer.TCPServer.allow_reuse_address  = True
        server = SocketServer.TCPServer((HOST, PORT), MyTCPHandler)
        server.serve_forever()

而这个接收器,

from django.http import HttpResponse
from django.template import Context, loader
import shelve
import zlib
import socket


def index(req, param = ''):
    HOST = 'localhost'    
    PORT = 50007              
    s = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
    s.connect((HOST, PORT))
    s.send(param)
    data = zlib.decompress(s.recv(131072))
    s.close()
    print 'Received', repr(data)
    t = loader.get_template('index.html') 
    c = Context({ 'foo' : data })
    return HttpResponse(t.render(c))

我正在向接收器发送数百千字节的字符串.我最终只收到了一部分.有没有办法可以解决这个问题,以便发送整个字符串？

编辑:我要发送的字符串实际上是418437个字符.但是这里的想法是......我正在尝试使用str(set)发送一个集合的字符串表示,所以我可以使用eval重新组合集合.有没有办法可以让套接字发送完整的数据或压缩它,以便套接字可以立即发送它？我尝试使用zlib,但压缩数据也没有完全发送,因为我反复得到头错误,这是我能够找到的,因为压缩字符串不完整.

Answer 1

socket.recv(N)并不保证将接收到恰好N个字节:相反,N只是一次吞吐时可以接收的最大字节数(为了效率,理想情况下它应该是4096的一小部分,因为docs建议).

你需要"继续接收"(循环和积累),直到你把所有你想要的字节(和它看起来像你的协议不传达重要价值:你将不得不使其明确,无论是与一个前缀长度或传输结束时的终结符,无法从流套接字中隐式提取它.

类似于发送,虽然在这种情况下你可以使用socket.sendall代表你做必要的循环.