Python应优先使用selectors而非select,因其自动适配平台最优机制(Linux用epoll、macOS用kqueue、Windows用IOCP),规避select的1024 fd限制、全量拷贝开销及跨平台兼容问题。

为什么不能直接用 select() 而要选 selectors?
因为 select() 在 Linux 上默认有 1024 文件描述符限制,且每次调用都要全量拷贝 fd_set 到内核,连接数一过千就明显拖慢;selectors 是 Python 对底层 epoll(Linux)、kqueue(macOS)、IOCP(Windows)的统一封装,自动选最优机制,避免手动判断平台和 syscall。
常见错误是直接用 select.select() 写千级连接服务,结果压测时 CPU 暴涨、延迟抖动严重——这不是代码逻辑错,是机制选错了。
-
selectors.DefaultSelector()会按系统自动挑EpollSelector或KqueueSelector,不用硬编码 - 别在循环里反复创建新 selector 实例,一个实例复用到底
- 注册 socket 时必须设为非阻塞模式:
sock.setblocking(False),否则select()可能卡住
如何注册/注销 socket 并避免 KeyError 或 FileNotFoundError?
注册后没及时注销、或 socket 已关闭但 selector 还在监听,就会触发 KeyError(查不到 key)或 OSError: [Errno 9] Bad file descriptor。根本原因是 socket 生命周期和 selector 管理没对齐。
正确做法是:所有 socket 关闭前,先调 selector.unregister(sock);如果不确定是否已注册,用 selector.get_key(sock) 检查返回值是否为 None。
立即学习“Python免费学习笔记(深入)”;
- 注册时用
selector.register(sock, selectors.EVENT_READ | selectors.EVENT_WRITE, data=...),data建议传入自定义对象(比如含addr、buffer的连接上下文),别传裸字典 - 注销前加 try/except:即使 socket 已 close,
unregister()仍可能抛KeyError,捕获后忽略即可 - 不要在回调函数里直接
sock.close()后立刻unregister()—— 有些 OS(如 macOS)要求 unregister 必须在 close 之前
selector.select(timeout) 返回空列表意味着什么?
不是出错了,而是当前没有就绪事件。但很多人误以为“没返回就是卡死”,于是加日志、重启循环、甚至重连 socket,反而引发雪崩。
真实场景中,select() 返回空很常见:客户端发完数据后静默、心跳间隔未到、网络暂时无新包。只要 timeout 设合理(比如 1 秒),空返回就是正常等待信号。
- timeout 设
None会永久阻塞,生产环境禁止这样用 - 设为 0 是轮询模式,CPU 占用飙升,仅调试时临时启用
- 真正要警惕的是连续多次(比如 5 次)空返回且无任何业务逻辑触发——说明可能漏了 register,或 socket 被意外关闭未通知 selector
如何安全地读写缓冲区并处理 BlockingIOError?
非阻塞 socket 调 recv() 或 send() 时,内核缓冲区空或满就会抛 BlockingIOError,这不是异常,是预期行为。强行 try/except 吞掉它却不做状态管理,会导致数据滞留或连接假死。
正确模式是:读取时检查 recv() 返回值是否为 0(对端关闭),写入时若 send() 返回字节数小于待发长度,就把剩余数据存进连接对象的 out_buffer,下次 EVENT_WRITE 就绪时再续发。
- 永远用
recv(65536)这类固定大小,别用recv(-1)—— 非阻塞下会直接抛错 -
send()成功返回值可能小于 buffer 长度,必须用memoryview(buf)[sent:]截取未发部分,别用字符串切片(会复制) - 收到
recv()返回 0 时,必须立刻unregister()+close(),否则该 socket 会持续触发EVENT_READ(边缘触发模式下尤其危险)
selectors 当万能胶水,却不在外层做连接生命周期控制,压测时十有八九会内存泄漏或 fd 耗尽。


















