当前位置: 首页 > news >正文

Python 多线程

Python 多线程基础概念

多线程允许程序在同一时间执行多个任务,适用于 I/O 密集型任务(如网络请求、文件读写)或需要并行处理的场景。Python 通过 threading 模块实现多线程,但由于全局解释器锁(GIL)的存在,多线程在 CPU 密集型任务中性能提升有限。

创建线程的两种方法

方法一:继承 threading.Thread

import threadingclass MyThread(threading.Thread):def __init__(self, thread_id, name):threading.Thread.__init__(self)self.thread_id = thread_idself.name = namedef run(self):print(f"线程 {self.name} 正在运行")# 创建线程实例
thread1 = MyThread(1, "Thread-1")
thread2 = MyThread(2, "Thread-2")# 启动线程
thread1.start()
thread2.start()# 等待线程结束
thread1.join()
thread2.join()
print("主线程退出")

方法二:直接使用 threading.Thread 构造函数

import threadingdef worker(name):print(f"线程 {name} 正在执行")# 创建线程
threads = []
for i in range(3):t = threading.Thread(target=worker, args=(f"Thread-{i}",))threads.append(t)t.start()# 等待所有线程完成
for t in threads:t.join()
print("所有线程执行完毕")

线程同步与锁机制

多线程共享全局变量时可能导致数据竞争,需使用锁(Lock)确保线程安全:

import threadingcounter = 0
lock = threading.Lock()def increment():global counterfor _ in range(100000):lock.acquire()counter += 1lock.release()threads = []
for _ in range(2):t = threading.Thread(target=increment)threads.append(t)t.start()for t in threads:t.join()
print(f"最终计数器值: {counter}")  # 正确输出 200000

线程间通信

通过 Queue 模块实现线程安全的数据交换:

import threading
import queue
import timedef producer(q):for i in range(5):time.sleep(1)q.put(f"产品 {i}")print(f"生产了 产品 {i}")def consumer(q):while True:item = q.get()if item is None:breakprint(f"消费了 {item}")q.task_done()q = queue.Queue()
producer_thread = threading.Thread(target=producer, args=(q,))
consumer_thread = threading.Thread(target=consumer, args=(q,))producer_thread.start()
consumer_thread.start()producer_thread.join()
q.put(None)  # 发送结束信号
consumer_thread.join()

线程池与高级用法

使用 concurrent.futures 简化线程管理:

from concurrent.futures import ThreadPoolExecutor
import urllib.requestdef download_url(url):with urllib.request.urlopen(url) as response:return f"{url}: {len(response.read())} 字节"urls = ["https://www.python.org","https://www.google.com","https://www.github.com"
]with ThreadPoolExecutor(max_workers=3) as executor:results = executor.map(download_url, urls)for result in results:print(result)

多线程与性能优化

GIL 的影响
Python 的全局解释器锁(GIL)确保同一时间只有一个线程执行字节码。对于 CPU 密集型任务,多线程可能无法提升性能,此时建议使用多进程(multiprocessing 模块)。

适用场景对比

  • 多线程:I/O 阻塞操作(如网络请求、文件读写)
  • 多进程:CPU 密集型计算(如数学运算、图像处理)

可视化示例

以下是一个简单的多线程执行流程图:

主线程
│
├─ 启动 Thread-1
│  └─ 执行任务 A
├─ 启动 Thread-2
│  └─ 执行任务 B
└─ 等待所有线程结束

完整代码示例

import threading
import timedef task(name, delay):print(f"任务 {name} 开始")time.sleep(delay)print(f"任务 {name} 完成")# 创建并启动线程
threads = [threading.Thread(target=task, args=("A", 2)),threading.Thread(target=task, args=("B", 1)),threading.Thread(target=task, args=("C", 3))
]for t in threads:t.start()# 等待线程结束
for t in threads:t.join()print("所有任务执行完毕")

注意事项

  • 避免死锁:确保锁的获取和释放成对出现。
  • 线程安全:使用 QueueLock 保护共享资源。
  • 异常处理:线程内的异常需在线程内捕获,否则会静默失败。

通过合理设计,多线程能显著提升程序响应速度,尤其是在涉及等待外部资源的场景中

http://www.dtcms.com/a/283526.html

相关文章:

  • Effective Python 第9条: 建议避免在for和while循环后使用else块
  • Scrapy无缝集成Splash:轻量级动态渲染爬虫终极解决方案
  • 轻量级消息总线实现 (C++)
  • 适用于高性能封装的TGV视觉检测方案
  • 版本更新 | 华望M-Design 4400版本功能更新详解(下篇)
  • [特殊字符] Electron 中的 `global` 变量
  • LVGL 列表表格控件颜色修改
  • 【时时三省】(C语言基础)通过指针引用多维数组2
  • oracle服务器定时备份Windows Server
  • 怎么用快鲸aiseo提升百度搜索排名?
  • 在 IntelliJ IDEA 中添加框架支持的解决方案(没有出现Add Framework Support)
  • 因果发现PCMCI 算法简述、Tigramite库的简单实践
  • 了解Java21
  • 项目流程管理系统使用建议:推荐13款
  • 【前端】【Echarts】【热力图】ECharts 热力图配置详解:从分割线到数据标签的全面指南
  • SQLSERVER清理日志
  • FreeRTOS学习笔记之任务调度
  • Maple2025 软件安装教程(Win版)
  • C++基础语法/C++语言新特性
  • 嵌入式Linux内存管理子系统控制与实现
  • 视觉SLAM:使用 Sophus 的 SE3 类,自己设计 g2o 的节点与边,实现 PnP 和 ICP 的优化
  • 交易日历接口api,股票/板块日,周,月K线行情接口api,情绪周期api,Level2实时数据api
  • 【python】sys.executable、sys.argv、Path(__file__) 在PyInstaller打包前后的区别
  • 《Java语言程序设计》1.2.3复习题
  • PHP 社区正在讨论变更许可证,预计 PHP 9.0 版本将完全生效
  • LangChain面试内容整理-知识点20:LangChain Expression Language (LCEL)
  • SAP学习笔记 - 开发46 - RAP开发 Managed App Metadata Extension 2 - Booking_M,BookSuppl_M
  • 2.PCL 对于点云的读写
  • 手写和印刷体混合怎么识别
  • ESP32——基于idf框架开发GPIO设备