6

我正在学习使用 HTML5 WebSockets，作为其中的一部分，我正在用 Python 编写一个服务器，这样我就可以了解它们的工作原理。前几天我创建了一个运行良好的，但我想扩展它，以便它支持多个端点，每个端点都是可以处理 websocket 客户端的不同“服务”。

目前，我的实现适用于生成进程等（我使用多处理而不是线程，因为我读到线程在 CPython 中并不是真正的多线程，这就是我认为我正在使用的（Ubuntu 12.04 上的默认安装）），但是我无法将收到的客户端套接字发送到服务进程。

这是我发送它们的方式（循环运行）：

try:
    #get a new client
    conn, addr = server.accept()
    print "Client connected from", addr
    request = conn.recv(4096)
    response, close, service = self.handshake(request)
    conn.send(response)
    if close:
        print "Invalid request from", addr
        conn.close()
        continue
    client = WebSockets.WebSocketClient(conn, addr)
    service.clientConnQueue.put(client)

'server' 是一个侦听传入连接的套接字。握手方法负责验证他们的请求并确定将客户端放入哪个服务进程。'response' 是发送的 http 响应，'close' 是 True 如果有错误，'service' 是继承自 multiprocessing.Queue 的类。WebSocktes.WebSocketClient 是存储我的发送和接收实现的地方，它基本上用作套接字的包装器。

'clientConnQueue' 的创建方式如下：

class Service(multiprocessing.Process):
    """Base class for all services."""
    def __init__(self, manager):
        multiprocessing.Process.__init__(self)
        self.manager = manager
        self.clientConnQueue = self.manager.Queue()
        self.shutdownFlag = multiprocessing.Event()

manager 是一个 multiprocessing.Manager()

当我尝试将客户端放入 clientConnQueue 时出现的错误如下：

File "./WebSocketServer.py", line 183, in <module>
main()
File "./WebSocketServer.py", line 180, in main
server.runServer()
File "./WebSocketServer.py", line 67, in runServer
service.clientConnQueue.put(client)
File "<string>", line 2, in put
File "/usr/lib/python2.7/multiprocessing/managers.py", line 758, in _callmethod
conn.send((self._id, methodname, args, kwds))
TypeError: expected string or Unicode object, NoneType found

然后我在接收端收到一个损坏的管道错误。

当我使用 multiprocessing.Queue 发送连接时遇到了同样的错误，我认为将其更改为由管理器创建的队列可以解决问题。但是，它似乎做了完全相同的实现。

显然，这不是人们应该将这样的东西发送到正在运行的进程的方式，那么将不可序列化的对象发送到进程的正确方法是什么？

4

4 回答 4

1

将套接字传递给另一个进程并不是一件小事。例如，看这个问题： 我可以打开一个套接字并将其传递给 Linux 中的另一个进程吗

无论如何，操作系统进程或线程并不是你真正想要的实现 websocket 服务器，因为内存开销很大。使用非阻塞套接字查看 smth ... 例如，Tornado http://www.tornadoweb.org/documentation/websocket.html

于 2012-05-28T18:31:13.423 回答
1

它已经存在了 4 年多，虽然需要一些工作。

胆量在 multiprocessing.reduction 中徘徊，示例的细节可以在这个 github gist中看到。

于 2012-09-14T18:08:39.927 回答
0

如果不使用深度 unix 魔法，就无法将套接字发送到分叉进程。如果您真的想了解它是如何在 C 中完成的，您可以阅读 Unix 环境中的高级编程一书。

对于使用线程的简单解决方案更改，您的代码可能会正常工作。虽然 Python 中的线程并不完美，但它非常适合做 IO 密集型的工作。

或者，在分叉之前创建您的侦听套接字并让所有子进程进行侦听（调用accept）。操作系统将确保只有其中一个获得连接。这是通常编写预分叉服务器的方式。

于 2012-05-28T18:24:33.953 回答
0

如果你在进程分叉之前创建套接字，那么它的文件描述符将被子进程继承。

于 2016-11-03T15:30:40.547 回答