Python 单线程为什么也能处理高并发 I/O?
技术百科
舞夢輝影
发布时间:2026-01-19
浏览: 次 Python单线程高并发I/O靠事件循环+非阻塞I/O+协程协作调度,非多线程;await挂起协程交还控制权,I/O就绪后恢复;CPU密集型任务需用run_in_executor避免阻塞循环。
Python 单线程能处理高并发 I/O,靠的不是“同时执行多个任务”,而是“不等”——在等待 I/O(比如网络请求、文件读写、数据库查询)时,主动把控制权交出去,去处理其他已经就绪的任务。核心机制是 事件循环 + 非阻塞 I/O + 协程协作式调度,而不是靠多线程或 CPU 并行。
非阻塞 I/O 让线程不卡在等待上
传统同步 I/O(如 requests.get())会一直卡住线程,直到响应返回;而异步 I/O(如 aiohttp 或 asyncio.open_connection)底层使用操作系统提供的非阻塞接口(如 Linux 的 epoll、macOS 的 kqueue)。调用后立刻返回,系统会在数据就绪时通知事件循环。
- socket 设置为 non-blocking 模式,read/write 立即返回,若无数据则抛出
BlockingIOError - 事件循环持续监控成百上千个 socket 的状态变化,只对“可读/可写”的 socket 才真正发起操作
- 没有“空转轮询”,效率远高于 while 循环检查
协程让逻辑可暂停、可恢复
Python 的 async/await 定义的是协程函数,它不是线程,也不开新栈,只是普通函数对象加了个状态机。遇到 await 时,当前协程主动挂起,把控制权还给事件循环

-
await后面必须是Awaitable对象(如asyncio.Future、asyncio.Task、另一个协程) - 挂起和恢复不涉及线程切换开销,上下文保存在协程对象内部(如局部变量存在
__code__和__closure__中) - 一个线程里可以轻松维持数万协程,内存占用极小(每个协程约几百字节)
事件循环统一调度,避免竞态与锁
整个异步程序运行在一个事件循环中(如 asyncio.run() 启动的默认循环),所有协程共享同一个线程、同一套变量空间。因为没有真实并发(无抢占式多任务),只要不手动调用阻塞函数(如 time.sleep()、requests.get()),就不会出现竞态条件。
- 不需要
threading.Lock,多数场景下普通变量即可安全读写 - 调度完全由程序员控制:
await是明确的让点,不是操作系统随机中断 - 调试更可预测——协程执行路径是确定的,不像多线程那样难以复现时序问题
注意:CPU 密集型任务仍会阻塞整个循环
异步 I/O 解决的是“等待慢设备”的问题,不是“计算慢”的问题。如果协程里做了大量数学运算、图像处理或正则匹配,事件循环会被独占,其他协程无法运行。
-
解决方法:用
loop.run_in_executor()把 CPU 工作扔进线程池或进程池 - 不要在协程中调用
time.sleep(),改用await asyncio.sleep() - 第三方库必须提供异步接口(如
aiohttp、aiomysql),否则需包装或换库
# ai
# 操作系统
# 的是
# 会在
# 也不
# 多个
# 解决方法
# python
# 不需要
# mac
# linux
# 循环
# 并发
# 对象
# macos
# cos
# 字节
# 内存占用
# 接口
# 数据库
# 为什么
# 线程
# 栈
# 异步
# 事件
# 多线程
# while
# 挂起
# mysql
# 局部变量
# 单线程
# 成百上千
相关栏目:
<?muma
$count = M('archives')->where(['typeid'=>$field['id']])->count();
?>
【
AI推广<?muma echo $count; ?>
】
<?muma
$count = M('archives')->where(['typeid'=>$field['id']])->count();
?>
【
SEO优化<?muma echo $count; ?>
】
<?muma
$count = M('archives')->where(['typeid'=>$field['id']])->count();
?>
【
技术百科<?muma echo $count; ?>
】
<?muma
$count = M('archives')->where(['typeid'=>$field['id']])->count();
?>
【
谷歌推广<?muma echo $count; ?>
】
<?muma
$count = M('archives')->where(['typeid'=>$field['id']])->count();
?>
【
百度推广<?muma echo $count; ?>
】
<?muma
$count = M('archives')->where(['typeid'=>$field['id']])->count();
?>
【
网络营销<?muma echo $count; ?>
】
<?muma
$count = M('archives')->where(['typeid'=>$field['id']])->count();
?>
【
案例网站<?muma echo $count; ?>
】
<?muma
$count = M('archives')->where(['typeid'=>$field['id']])->count();
?>
【
精选文章<?muma echo $count; ?>
】
相关推荐
- PowerShell怎么创建复杂的XML结构
- Python文件和流处理指南_高效读写大体积数据文
- c++ try_emplace用法_c++ map
- Avalonia如何实现跨窗口通信 Avaloni
- Win11讲述人怎么关闭_Win11误触开启语音朗
- Win10如何设置双wan路由器 Win10双wa
- windows系统找不到无线网络怎么办_windo
- Flask 表单数据通过 SMTP 发送邮件的完整
- 如何使用Golang管理模块版本_Golanggo
- c++怎么设置线程优先级与cpu亲和性_c++ 多
- 如何使用Golang优化模块引入路径_Golang
- 如何使用Golang table-driven f
- 如何在Golang中理解指针比较_Golang地址
- Mac系统更新下载慢或失败怎么办_解决macOS升
- c++ namespace命名空间用法_c++避免
- Win11怎么连接投影仪_Win11多显示器投屏设
- Windows 11怎么设置默认解压软件_Wind
- Windows 10怎么录屏_Windows 10
- 如何在Golang中指定模块版本_使用go.mod
- C#如何使用Channel C#通道实现异步通信
- Win11怎么更改输入法顺序_Win11调整语言首
- 如何在JavaScript中动态拼接PHP的bas
- 如何在 Python 中将 ISO 8601 时间
- php怎么下载安装并配置环境变量_命令行调用PHP
- c++怎么处理多线程死锁_c++ lock_gua
- php查询数据怎么分组_groupby分组查询配合
- c# 如何深拷贝和浅拷贝
- windows如何禁用驱动程序强制签名_windo
- 电脑无法识别U盘怎么办 Windows磁盘管理与驱
- c++中如何求一个数的平方根_c++ sqrt函数
- php接口返回数据乱码怎么办_php接口调试编码问
- Win10如何备份驱动程序_Win10驱动备份步骤
- 如何使用正则表达式提取以编号开头、后跟多个注解的完
- Win11触摸板没反应怎么办_开启Win11笔记本
- Mac如何修复应用程序权限问题_Mac磁盘工具修复
- Win10系统更新错误0x80240034怎么办
- MAC怎么设置程序窗口永远最前_MAC窗口置顶插件
- Mac如何设置动态壁纸?(让桌面动起来)
- 如何使用Golang管理跨项目依赖_Golang多
- 如何使用Golang实现容器健康检查_监控和自动重
- 如何在 PHP 单元测试中正确模拟带方法的图像处理
- Python代码测试策略_质量保障解析【教程】
- C++ static_cast和dynamic_c
- Win11怎么设置快速访问_Windows11文件
- Win11怎么设置虚拟桌面 Win11新建多桌面切
- VSC怎么配置PHP的Xdebug_远程调试设置步
- 如何在Golang中实现微服务服务拆分_Golan
- Win11怎么关闭开机声音_Win11系统启动提示
- Win11怎么设置鼠标宏_Win11鼠标按键自定义
- Win10如何关闭安全中心所有通知 Win10禁用

QQ客服