面试题：Python Socket编程底层错误处理与优化

操作系统调优

增加文件描述符限制：
- 在Linux系统中，可以通过修改/etc/security/limits.conf文件来增加用户或进程的文件描述符限制。例如，添加如下配置：
```
* soft nofile 65535
* hard nofile 65535
```
这里*表示所有用户，soft是软限制，hard是硬限制，一般软限制要小于等于硬限制。修改后需要重新登录或使用ulimit -n 65535命令临时生效。
- 在macOS系统中，可通过sudo launchctl limit maxfiles 65535 65535命令临时修改，若要永久修改，可在/Library/LaunchDaemons/limit.maxfiles.plist文件中添加如下内容并加载：
```
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE plist PUBLIC "-//Apple//DTD PLIST 1.0//EN" "http://www.apple.com/DTDs/PropertyList - 1.0.dtd">
<plist version="1.0">
<dict>
    <key>Label</key>
    <string>limit.maxfiles</string>
    <key>ProgramArguments</key>
    <array>
        <string>launchctl</string>
        <string>limit</string>
        <string>maxfiles</string>
        <string>65535</string>
        <string>65535</string>
    </array>
    <key>RunAtLoad</key>
    <true/>
</dict>
</plist>
```
优化内核参数：
- 在Linux系统中，调整net.ipv4.tcp_tw_reuse和net.ipv4.tcp_tw_recycle参数，可允许快速重用TIME - WAIT状态的套接字。例如，在/etc/sysctl.conf文件中添加或修改：
```
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
```
然后执行sudo sysctl -p使配置生效。注意net.ipv4.tcp_tw_recycle在NAT环境下可能有问题，需要谨慎使用。
- 调整net.core.somaxconn参数，该参数定义了socket监听队列的最大长度。可通过在/etc/sysctl.conf文件中修改：
```
net.core.somaxconn = 1024
```
之后执行sudo sysctl -p生效，适当增大此值可避免因监听队列满而丢弃连接请求。

Python代码层面的资源管理

连接池：

使用连接池来管理Socket连接，避免频繁创建和销毁Socket。例如，可以使用Queue模块实现简单的连接池。

import socket
from queue import Queue
from threading import Thread

class SocketPool:
    def __init__(self, num_connections):
        self.pool = Queue(num_connections)
        for _ in range(num_connections):
            sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
            self.pool.put(sock)

    def get_socket(self):
        return self.pool.get()

    def return_socket(self, sock):
        self.pool.put(sock)

在实际使用中：

pool = SocketPool(100)
sock = pool.get_socket()
try:
    sock.connect(('example.com', 80))
    # 进行数据发送和接收操作
finally:
    pool.return_socket(sock)

异常处理：

在创建Socket时，捕获socket.error异常，并针对EMFILE错误进行特殊处理。例如：

import socket

try:
    sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
except socket.error as e:
    if e.errno == socket.errno.EMFILE:
        # 可以记录日志，等待资源释放后重试
        print("Socket creation failed due to EMFILE. Retrying later...")
        # 这里可以实现一个重试逻辑，例如休眠一段时间后再次尝试创建
    else:
        raise

Socket参数配置

设置Socket选项：
- 设置SO_REUSEADDR选项，允许在绑定端口时重用地址。
```
import socket

sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
sock.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)
sock.bind(('0.0.0.0', 8080))
```
这样在程序重启时，如果之前绑定的端口还处于TIME - WAIT状态，也可以成功绑定。

设置超时时间：

设置SO_RCVTIMEO和SO_SNDTIMEO选项来设置接收和发送数据的超时时间。

import socket
import time

sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
sock.settimeout(5)  # 整体的连接和操作超时时间设置为5秒
# 也可以单独设置接收和发送超时
sock.setsockopt(socket.SOL_SOCKET, socket.SO_RCVTIMEO, struct.pack('ll', 5, 0))
sock.setsockopt(socket.SOL_SOCKET, socket.SO_SNDTIMEO, struct.pack('ll', 5, 0))
try:
    sock.connect(('example.com', 80))
    sock.sendall(b'GET / HTTP/1.1\r\nHost: example.com\r\n\r\n')
    data = sock.recv(1024)
except socket.timeout:
    print("Operation timed out")

合理设置超时时间可以避免因长时间等待而占用资源。

星途面试题库

面试题：Python Socket编程底层错误处理与优化

知识考点

面试题答案

操作系统调优

Python代码层面的资源管理

Socket参数配置