pysctp中出现的IOError: [Errno 11] Resource temporarily unavailable以及无限重复接收的问题

来源:互联网 发布:异次元软件 编辑:程序博客网 时间:2024/06/06 04:00

记录一次异常的SCTP连接错误

最近公司的一个项目,需要用到SCTP协议来传输diameter协议内容。于是最近研究了下SCTP协议在python中的实现。
SCTP协议的python实现非常少,搜了下,只有pysctp这个库,而且只能运行于Linux系统。于是就按照对于TCP的理解,写了一个简单的服务器和客户端的实现。

开发环境:Ubuntu16.04,;python2.7;Pycharm。

在pycharm的自带终端Terminal中debug过程中,我发现client客户端在连接上服务器之后,服务器端经常会出现一个错误,错误异常为:IOError: [Errno 11] Resource temporarily unavailable :

Traceback (most recent call last):  File "/home/test/Downloads/pycharm-community-2017.1.1/helpers/pydev/pydevd.py", line 1578, in <module>    globals = debugger.run(setup['file'], None, None, is_module)  File "/home/test/Downloads/pycharm-community-2017.1.1/helpers/pydev/pydevd.py", line 1015, in run    pydev_imports.execfile(file, globals, locals)  # execute the script  File "/home/test/PycharmProjects/sctp_socket/server.py", line 47, in <module>    fromaddr, flags, msg, notif = conn_sock.sctp_recv(BUFSIZE)  File "/home/test/sctp_env/local/lib/python2.7/site-packages/sctp.py", line 1206, in sctp_recv    (fromaddr, flags, msg, _notif) = _sctp.sctp_recv_msg(self._sk.fileno(), maxlen)IOError: [Errno 11] Resource temporarily unavailable

虽然问题定位到sctp_recv_msg这个函数,但是我发现只要connect成功,并不需要收发数据,就会触发这个错误。而且不是百分之百,会概率出现,而且有时连接成功后,发送一个data块,服务器再往回返,会收到无限多个重复的data块。使用wireshark抓包也看不出来有什么问题。

百思不得其解啊,CSDN / stackoverflow什么的都搜了个遍也没找到解决问题的方案,本来已经想要放弃了,打算底层socket的收发使用C语言/C++来封装,使用python来调用socket接口,虽然实现起来可能比全python稍微麻烦一点,但起码能跑起来。。。

最后,我分别使用命令行重新试了下,

python server.py
python client.py

一切正常,问题就这么解决了。WTF…

事后回想,问题大概率是出在pycharm的终端上;但是同事使用debian命令行也曾出现过无限多次重复接收的问题。。不知道为啥了…反正现在已经好了

——–

0502更新部分:经过多次测试,多次重复接收问题是因为:当socket关闭时,recv端会接收到无限多次msg为空的消息,如果没有对msg进行判断的话,会无线循环接收。。因此,解决办法就是加一个判断句:if not msg: break

而Errno 11的问题,还没有明确解决方案。暂时定位为不能使用非阻塞,即setblocking(1),不能为0…

——–

最后贴一段简单的server和client代码,copy下来就能跑。当然需要先安装pysctp这个库(这个库需要先安装Debian/Ubuntu sudo apt-get install libsctp-dev lksctp-tools,不然会报错找不到文件)。。如果下面程序运行报错的话把中文去了试试。

# -*- coding: utf-8 -*-# 实现简单的socket服务器功能import socketimport sctpfrom time import ctimeHOST = ''PORT = 3868BUFSIZE = 1024ADDR = (HOST, PORT)socket_serv = sctp.sctpsocket(socket.AF_INET, socket.SOCK_STREAM,None)  # , sctp.IPPROTO_SCTPsocket_serv.initparams.max_instreams = 3socket_serv.initparams.num_ostreams = 3#socket_serv.initparams.max_attempts = 2#socket_serv.initparams.set_max_init_timeo(0)socket_serv.bindx([ADDR])socket_serv.listen(5)# socket_serv.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)# socket_serv.setblocking(0)socket_serv.events.data_io = 1socket_serv.events.clear()while True:    print '等待用户连接...'    conn_sock, addr = socket_serv.accept()    print '有用户接入:', addr    msg = ''    while True:        # msg= conn_sock.recv(BUFSIZE)        fromaddr, flags, msg, notif = conn_sock.sctp_recv(BUFSIZE)        print 'recv: %s' % msg        if not msg:            break        conn_sock.sctp_send('当前时间:%s...发过来的是%s' % (ctime(), msg))    conn_sock.close()socket_serv.close()
# -*- coding:utf-8import _sctpfrom sctp import *server = "localhost"tcpport = 3868if _sctp.getconstant("IPPROTO_SCTP") != 132:    raise "getconstant failed"client_sock = sctpsocket(socket.AF_INET, socket.SOCK_STREAM, None)saddr = (server, tcpport)print "TCP ", saddr, " ----------------------------------------------"client_sock.initparams.max_instreams = 3client_sock.initparams.num_ostreams = 3#client_sock.initparams.max_attempts = 2#client_sock.initparams.set_max_init_timeo(0)# tcp.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)# client_sock.setblocking(0)client_sock.events.clear()client_sock.events.data_io = 1  # 要获取消息的流编号,SCTP 需要启用套接字选项 sctp_data_io_eventclient_sock.connect(saddr)while 1:    while True:        data = raw_input('INPUT: ')        if not data:            break        client_sock.sctp_send(data)        fromaddr, flags, msg, notif = client_sock.sctp_recv(1024)        # print "   Msg arrived, flag %d" % flags        #if flags & FLAG_NOTIFICATION:        #    raise "We did not subscribe to receive notifications!"        #else:        #    print "%s____" % msg, cont        print "%s____" % msg    breakclient_sock.close()

如果还有问题,欢迎回帖/发邮件讨论。ayocross1@gmail.com


20170608更新部分:
1. 无限循环接收问题,将sctp_recv函数改为普通的recv函数后,再没出现过;
2. [Errno 11] Resource temporarily unavailable问题,暂时替代解决方案同样已找到。


20170821最后更新:
做完这个项目之后,一直忘了更新这个问题的解决方案,今天看当时的日志文档才记起来。。最终解决方案如下:

出现此问题的原因的pysctp项目源码中,_sctp.c文件 1549行,最后一个函数:

static PyObject* sctp_recv_msg(PyObject* dummy, PyObject* args){    int fd, max_len;    struct sockaddr_storage sfrom;    socklen_t sfrom_len = sizeof(sfrom);    int family;    int len;    int port;    char cfrom[256];    char *msg;    int size;    int flags;    struct sctp_sndrcvinfo sinfo;    ...

作者忘记给flags赋初始值,所以才导致异常,因此改正方法很简单:int flags = 0;

python setup.py install安装即可。问题再也不会出现。

0 0
原创粉丝点击