新手学Python避坑,学习效率狂飙! 十七、Python 多线程和多进程
moboyou 2025-06-07 16:56 2 浏览
Python 中的多线程和多进程是用于实现并发执行的两种重要机制,以下是对它们的一些分享。
多线程
- 定义:线程是进程中的一个执行单元,是程序执行的最小单位。在一个进程中可以有多个线程,它们共享进程的资源,如内存空间、文件句柄等。
- 工作原理:多线程在同一进程内,通过 CPU 的时间片轮转来实现并发执行。每个线程在获得时间片时执行一段代码,然后暂停,让其他线程有机会执行,以此来实现多个任务看似同时进行。
- 使用场景:适用于 I/O 密集型任务,例如网络请求、文件读写等。因为在这些任务中,线程大部分时间都在等待 I/O 操作完成,而不是占用 CPU 进行计算,所以多个线程可以在等待 I/O 的过程中互相切换,提高程序的整体效率。
示例代码
python
import threading
import time
def print_numbers():
for i in range(1, 6):
print(f"Thread 1: {i}")
time.sleep(1)
def print_letters():
for char in 'abcde':
print(f"Thread 2: {char}")
time.sleep(1)
if __name__ == "__main__":
# 创建两个线程
t1 = threading.Thread(target=print_numbers)
t2 = threading.Thread(target=print_letters)
# 启动线程
t1.start()
t2.start()
# 等待线程结束
t1.join()
t2.join()
print("Both threads have finished.")
多进程
- 定义:进程是一个具有独立内存空间和系统资源的执行实体,每个进程都有自己独立的地址空间、文件描述符等资源。
- 工作原理:操作系统会为每个进程分配独立的资源,并通过调度算法来分配 CPU 时间,使得多个进程可以并发执行。进程之间的通信需要通过特定的机制,如管道、消息队列、共享内存等来实现。
- 使用场景:适用于 CPU 密集型任务,因为每个进程都有独立的 CPU 资源,多个进程可以同时在不同的 CPU 核心上并行执行,充分利用多核处理器的性能,提高计算效率。
示例代码
python
import multiprocessing
import time
def print_numbers():
for i in range(1, 6):
print(f"Process 1: {i}")
time.sleep(1)
def print_letters():
for char in 'abcde':
print(f"Process 2: {char}")
time.sleep(1)
if __name__ == "__main__":
# 创建两个进程
p1 = multiprocessing.Process(target=print_numbers)
p2 = multiprocessing.Process(target=print_letters)
# 启动进程
p1.start()
p2.start()
# 等待进程结束
p1.join()
p2.join()
print("Both processes have finished.")
异同分析
- 相同点目的:都是为了实现程序的并发执行,提高程序的运行效率和响应能力,让多个任务可以同时进行,从而更好地利用计算机资源。并发执行:都可以让多个任务在同一时间内并发执行,给用户一种多个任务同时进行的感觉。
- 不同点资源占用:多线程共享进程的资源,所以创建和切换线程的开销较小;而多进程每个进程都有独立的资源,创建和销毁进程的开销较大。数据共享:多线程之间可以直接共享进程内的变量和数据结构;多进程之间的数据共享需要通过特定的通信机制,相对复杂。执行效率:对于 I/O 密集型任务,多线程由于可以在等待 I/O 时切换线程,通常效率较高;对于 CPU 密集型任务,多进程可以利用多核处理器并行执行,效率更高。稳定性:多线程中一个线程出现错误可能会影响整个进程;多进程中一个进程出现问题,通常不会影响其他进程,稳定性相对较好。
避坑指南
- 多线程避坑线程安全问题:多个线程同时访问共享资源时可能会导致数据不一致等问题。例如多个线程同时对一个全局变量进行修改。要解决这个问题,可以使用锁机制来确保同一时间只有一个线程访问共享资源。死锁问题:当多个线程相互等待对方释放资源时,就会发生死锁。例如线程 A 持有锁 1 并等待锁 2,而线程 B 持有锁 2 并等待锁 1。为避免死锁,要合理设计锁的获取顺序,或者使用超时机制来避免无限等待。
- 多进程避坑进程间通信的复杂性:进程间通信需要使用特定的机制,如管道、消息队列等,如果使用不当可能会导致数据丢失或通信错误。在使用进程间通信时,要确保对通信机制的原理和使用方法有清晰的理解,并且进行充分的测试。资源限制:创建过多的进程可能会导致系统资源耗尽,因为每个进程都需要独立的内存空间和其他系统资源。要根据系统的资源情况合理控制进程的数量。
下面是一个线程安全问题的示例:
python
import threading
# 共享资源
counter = 0
lock = threading.Lock()
def increment_counter():
global counter
for _ in range(100000):
# 获取锁
with lock:
counter += 1
def decrement_counter():
global counter
for _ in range(100000):
# 获取锁
with lock:
counter -= 1
if __name__ == "__main__":
# 创建两个线程
t1 = threading.Thread(target=increment_counter)
t2 = threading.Thread(target=decrement_counter)
# 启动线程
t1.start()
t2.start()
# 等待线程结束
t1.join()
t2.join()
print(f"Counter value: {counter}")
在这个示例中,通过使用锁lock来确保在对共享资源counter进行操作时的线程安全。如果不使用锁,那么counter的值可能会因为两个线程同时访问和修改而出现错误。
感谢大家对《新手学Python避坑,学习效率狂飙!》系列的点赞、关注和收藏今天这编是第十七个分享,前面还有十六个,大家可以关注下之前发布的文章。
相关推荐
- python多线程实现查找目录下有没有相同哈希值的文件
-
python多线程实现查找目录下有没有相同的文件,列出哈希值相同的文件importosimporthashlibfromconcurrent.futuresimportThreadPoo...
- Java、Go 和 Python 多线程性能对比
-
大家好,我是难瓜。今天分享多线程下这三门语言的表现。简介在计算机中,线程是可以由处理器独立执行的小指令序列。多线程在一个进程中是可能的,其中它们共享资源,例如指令和上下文。发现在运行多线程进程时效率最...
- 干货分享丨Python多线程之_thread与threading模块
-
在Python程序中,多线程的应用程序会创建一个函数,来执行需要重复执行多次的程序代码,然后创建一个线程执行该函数。一个线程是一个应用程序单元,用于在后台并行执行多个耗时的动作。在多线程的应用程序中,...
- 一文带您了解Python中的并发:异步(Asyncio)和多线程(Thread)
-
Python以其简单性和多样性而闻名,是一种适用于广泛应用领域的编程语言。在处理多个任务并发时,Python提供了两种主要方法:Asyncio用于异步编程,Multithreading用于管理多个...
- 解锁Python并发编程:多线程和多进程的神秘面纱揭晓
-
欢迎来到我们的系列博客《Python全景系列》!在这个系列中,我们将带领你从Python的基础知识开始,一步步深入到高级话题,帮助你掌握这门强大而灵活的编程语法。无论你是编程新手,还是有一定基础的开发...
- Python多线程-基础篇
-
一、多线程相关概念1.并发和并行的区别并发和并行是即相似又有区别的两个概念,并行是指两个或者多个事件在同一时刻同时执行,而并发是指两个或多个事件通过时间片轮流被执行。从计算机工作原理的角度出发,“并发...
- PYTHON多线程实现web服务器httpserver实例
-
PYTHON多线程实现web服务器importhttp.serverimportsocketserverimportthreading#服务器监听的端口PORT=8000#...
- 如何编写Python漏洞验证脚本(单线程和多线程)
-
我们实战经常会遇到以下几个问题:1、遇到一个利用步骤十分繁琐的漏洞,中间错一步就无法利用2、挖到一个通用漏洞,想要批量刷洞小赚一波,但手动去测试每个网站工作量太大这个时候编写一个poc脚本将会减轻...
- Python 多线程高频面试题,直接把这些答案“甩在”面试官脸上
-
点赞、收藏、加关注,下次找我不迷路不管你是刚入行的新手,还是有一定经验的开发者,掌握多线程的核心问题,都能让你在面试中脱颖而出。今天咱就来盘一盘5个高频的Python多线程面试题,用通俗易懂...
- python多进程和多线程的使用和对比
-
介绍多线程和多进程是常见的并发编程模型,它们被广泛应用于各种类型的应用程序中。在本文中,我将就Python多线程和多进程进行详细的对比。首先,让我们来看一下Python多线程。多线程是一种并发编程模型...
- 24-3-Python多线程-线程队列-queue模块
-
3-1-概念queue模块提供了多线程编程中的队列实现,队列是线程安全的数据结构,能在多线程环境下安全地进行数据交换。3-2-queue的队列类型Queue(先进先出队列)、LifoQueue(后进...
- 玩蛇(Python) - 并发编程之多线程
-
一、线程简介线程(thread)是操作系统能够进行运算调度的最小单位。它被包含在进程之中,是进程中的实际运作单位。由于线程是操作系统直接支持的执行单元,因此,高级语言通常都内置多线程的支持,Pytho...
- Python多进程与多线程应用场景对比
-
在Python中,多进程(Multiprocessing)和多线程(Multithreading)的选择取决于任务类型(I/O密集型vsCPU密集型)、Python的GIL限制以及并...
- Python多线程,守护线程和非守护线程,线程的join方法,代码案例
-
守护线程和非守护线程守护线程&&非守护线程守护线程,是和主线程一起结束的线程,叫守护线程,非守护线程,主线程的结束不影响该线程的执行,主线程结束非守护线程不会立刻结束,也叫用户线程。Python的守护...
- Python3中最常用的5种线程锁你会用吗
-
前言本章节将继续围绕threading模块讲解,基本上是纯理论偏多。对于日常开发者来讲很少会使用到本章节的内容,但是对框架作者等是必备知识,同时也是高频的面试常见问题。私信小编01即可获取大量Pyth...
- 一周热门
- 最近发表
- 标签列表
-
- curseforge官网网址 (16)
- 外键约束 oracle (36)
- oracle的row number (32)
- 唯一索引 oracle (34)
- oracle in 表变量 (28)
- oracle导出dmp导出 (28)
- oracle 数据导出导入 (16)
- oracle两个表 (20)
- 启动oracle的监听服务 (13)
- oracle 数据库 字符集 (20)
- powerdesigner oracle (13)
- oracle修改端口 (15)
- 左连接 oracle (15)
- oracle 标准版 (13)
- oracle 转义字符 (14)
- oracle安装补丁 (19)
- matlab归一化 (16)
- matlab脚本 (14)
- matlab阶跃函数 (14)
- 三次样条插值matlab (14)
- 共轭梯度法matlab (16)
- matlab化简多项式 (20)
- 在线客服网页源码 (14)
- 多线程的创建方式 (29)
- 多线程 python (30)