推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
moxiaowei
V2EX  ›  Python

websocket 服务器端接收大文件时的疑问

  •  
  •   moxiaowei · Jul 20, 2019 · 3110 views
    This topic created in 2513 days ago, the information mentioned may be changed or developed.

    接收部分代码如下,粘包我已经做了处理,但是,发送的如果是文件,不论是任何文件,都会出现问题!

        def recvMessage(self, sockHandle):#读取来自客户端的数据
            print("请求开始")
            strings = b""
            resDict = {}
            client = self.dictSocketHandle[sockHandle]
            if not self.dictSocketShakeHandStatus[sockHandle]:#如果没有握手完成,我用 1024 个字节去接收数据是完全够用的
                data = client.recv(1024)  # 这儿如果没有拿够 1024 个字节的数据,那么会循环回来拿,但是,如果发现没有数据能拿到,socket 会自动中止,扔出一个异常,代码就结束执行,所以需要 try 一下。
                if len(data) == 0:  # 通道断开或者 close 之后,就会一直收到空字符串。 而不是所谓的-1 或者报异常。这个跟 C 和 java 等其他语言很不一样。
                    self.epollHandle.modify(sockHandle, select.EPOLLHUP | select.EPOLLET)
                strings = data
                optCode = -5
            else: #如果已经握手完成了,那么先要去完成一次通讯由客户端告知服务端,下一次要发送的数据大小
                data_head = client.recv(1)
                data_head = struct.unpack("B", data_head)[0]
                optCode = self.parseHeadData(data_head)
                if optCode == 0:#客户端要求退出,其余这儿不处理
                    self.closeConnect(client.fileno())
                    return
                print("操作码为:", optCode)
                byteData = client.recv(1)
                byteData = struct.unpack("B", byteData)
                payload_len = byteData[0] & 127
                print("payloadLen", payload_len)
    
                if payload_len == 126:
                    extend_payload_len = client.recv(2)  # 数据头部延伸的长度
                    dataLength = struct.unpack("H", extend_payload_len)[0]
                    mask = client.recv(4)  # 加密的 4 个字节
                elif payload_len == 127:
                    extend_payload_len = client.recv(8)
                    dataLength = struct.unpack("Q", extend_payload_len)[0]
                    mask = client.recv(4)
                else:
                    dataLength = payload_len
                    mask = client.recv(4)
                print("接收到的数据长度为:", dataLength)
    
                bytes_list = bytearray('', encoding='utf-8')
                recvLen = 0
                while recvLen < dataLength:
                    try:
                        data = client.recv(1024)
                        print("一次取到数据长度", len(data))
                        for i in range(len(data)):
                            chunk = data[i] ^ mask[i % 4]
                            bytes_list.append(chunk)
                        recvLen = recvLen + len(data)
                        print("目前接收数据总长度", recvLen)
                    except IOError as e:
                        if e.errno == 11:
                            continue
                strings = bytes_list
            resDict["string"] = strings
            resDict["type"] = optCode
    
            return resDict
    

    上面的代码,如果上传文件会有如下的效果,不知道为啥!!!求大神帮我!!

    请求开始
    Binary frames 二进制帧上传文件
    操作码为:5
    payloadLen 126
    接收到的数据长度为:15530
    一次取到数据长度 1024
    目前接收数据总长度 1024
    一次取到数据长度 1024
    目前接收数据总长度 2048
    一次取到数据长度 1024
    目前接收数据总长度 3072
    一次取到数据长度 1024
    目前接收数据总长度 4096
    一次取到数据长度 1024
    目前接收数据总长度 5120
    一次取到数据长度 1024
    目前接收数据总长度 6144
    一次取到数据长度 1024
    目前接收数据总长度 7168
    一次取到数据长度 1024
    目前接收数据总长度 8192
    一次取到数据长度 1024
    目前接收数据总长度 9216
    一次取到数据长度 1024
    目前接收数据总长度 10240
    一次取到数据长度 1024
    目前接收数据总长度 11264
    一次取到数据长度 1024
    目前接收数据总长度 12288
    一次取到数据长度 1024
    目前接收数据总长度 13312
    一次取到数据长度 1024
    目前接收数据总长度 14336
    一次取到数据长度 1024
    目前接收数据总长度 15360
    一次取到数据长度 1024
    目前接收数据总长度 16384
    请求开始
    Unknown opcode %#x.6
    操作码为:4
    payloadLen 3
    接收到的数据长度为:3
    一次取到数据长度 1024
    目前接收数据总长度 1024
    请求开始
    pong frames are not supported.
    操作码为:4
    payloadLen 91
    接收到的数据长度为:91
    一次取到数据长度 1024
    目前接收数据总长度 1024
    请求开始
    Continuation frames are not supported.
    操作码为:4
    payloadLen 14
    接收到的数据长度为:14
    一次取到数据长度 1024
    目前接收数据总长度 1024
    

    注意 我只请求了一次上传文件,但是 会 有多个 ”请求开始“ 证明就是 recv 了多次,难道说 websocket 的 js 端会自动切片上传?

    2 replies    2019-07-20 23:44:26 +08:00
    mason961125
        1
    mason961125  
       Jul 20, 2019 via iPhone
    行吧,粘包,
    momocraft
        2
    momocraft  
       Jul 20, 2019
    不建议还在使用“粘包”概念的人自己写通讯协议
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   900 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 35ms · UTC 22:14 · PVG 06:14 · LAX 15:14 · JFK 18:14
    ♥ Do have faith in what you're doing.