首页
学习
活动
专区
圈层
工具
发布

python协程--asyncio模块

python3.4之后引入了基于生成器对象的协程概念。也就是asyncio模块。...二、asyncio模块 asyncio模块 密集运算测试(线程安全!不存在争夺资源问题),所以协程在密集运算和IO并发上都有很强的支持。...)) #将协程塞进事件循环中 代码实现思路: (1)思路1:每一个协程的睡眠时间相同,也就是说几乎是同时在运行密集型计算,并用num自增计算作为协程的代号。...(2)思路2:为了区别开不同协程的占据CPU的运行时间片,我对睡眠时间进行了一个乘法运算,协程代号越大的协程睡眠时间越长,并用时间作为协程代号的记录。...因为最大协程号,睡眠时间最短,所以它先执行输出,而协程号是累加的,所以后面执行的线程都会以最大的协程号作为标记。

1.1K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    【Kotlin 协程】协程异常处理 ③ ( 协程异常处理器 CoroutineExceptionHandler 捕获异常 | 验证 CoroutineScope 协程的异常捕捉示例 )

    协程的异常捕捉示例 一、协程异常处理器 CoroutineExceptionHandler 捕获异常 ---- 在 【Kotlin 协程】协程上下文 ( 协程上下文构成要素 | 指定协程上下文元素组合...进行捕获 , 异常满足如下两个条件才会被捕 : 异常捕获时机 : 协程 自动抛出 的异常 , 可以在协程内被捕获 ; 使用 launch 构建的协程 可以在协程中捕获异常 , 使用 async 构建的协程...在使用 CoroutineExceptionHandler 对协程运行过程中产生的 异常 进行捕获 时 , 异常捕获的位置 只能是 协程作用域 CoroutineScope 或者在 根协程 中 ;...时 , 使用的 CoroutineScope(Job()) 进行创建 , 不是 SupervisorJob , 因此 在子协程中抛出的异常 , 会传递给父协程 , 由父协程处理异常 , 父协程创建时使用的...val job = scope.launch(coroutineExceptionHandler) 代码 , 在协程构建器中传入了 协程异常处理器 , 因此该协程异常处理器 可捕获 子协程传递给父协程的异常

    2K20

    Python协程、异步IO与asyncio

    在Python中,异步IO通常与协程一起使用,以实现高效的非阻塞IO编程。 asyncio: asyncio是Python标准库中的异步IO库,用于编写基于协程的异步程序。...await:await关键字用于在协程中等待另一个协程或异步操作完成。当执行到await语句时,协程将暂停,直到等待的操作完成。...事件循环:异步IO通常使用事件循环来管理协程和异步任务的调度。事件循环负责将协程放入等待IO的队列,并在IO完成时恢复它们的执行。...asyncio.run():这个函数用于运行主协程,它在Python 3.7及更高版本中可用。 asyncio.create_task():用于创建并调度协程任务。...Asyncio允许我们使用 async/await 语法编写并发代码。Asyncio 由协程、任务、流、子进程、异常等高级 API 和事件循环、Futures、传输和协议等低级 API 组成。

    1.6K30

    Python asyncio之协程学习总结

    返回asyncio.wait(tasks)的运行结果,或者抛出异常。 asyncio.run(coro, *, debug=False) 执行协程 coro 并返回结果。...FIRST_EXCEPTION 函数将在任意可等待对象因引发异常而结束时返回。当没有引发任何异常时它就相当于ALL_COMPLETED。...仅当封装的协程没有捕获CancelledError异常或抛出CancelledError异常时,cancelled()才会返回True。 如果一个挂起的task被销毁,则其封装的协程不会被执行完。...当封装的协程以CancelledError异常终止时,task将被标记为已取消(即使未调用cancel())。...事件循环将在所有task完成后停止。 Task函数 注意: 在下面的函数中,可选的循环参数允许显式设置底层task或协程使用的事件循环对象。

    1.8K100

    【Kotlin 协程】协程异常处理 ① ( 根协程异常处理 | 自动传播异常 | 在协程体捕获异常 | 向用户暴露异常 | 在 await 处捕获异常 | 非根协程异常处理 | 异常传播特性 )

    文章目录 一、协程异常处理 二、根协程自动传播异常 1、异常抛出点 ( 协程体抛出异常 ) 2、异常捕获点 ( 在协程体捕获异常 ) 三、根协程向用户暴露异常 1、异常抛出点 ( 在 await、...receive 处抛出异常 ) 2、异常捕获点 ( 在 await、receive 处捕获异常 ) 四、非根协程异常处理 五、异常传播特性 一、协程异常处理 ---- 在 协程任务 中 , 执行的代码出现异常...( 协程体抛出异常 ) launch 构建器 异常代码示例 : 使用 launch 构建器创建协程 , 在协程任务中抛出异常 , 查看异常的抛出点 ; package kim.hsl.coroutine...---- 协程 运行时 , 产生异常 , 会将异常 传递给 父协程 , 父协程会执行如下操作 : ① 取消子协程 : 不仅仅取消产生异常的子协程 , 该父协程下所有的子协程都会取消 ; ② 取消父协程...: 将父协程本身取消 ; ③ 向父协程的父协程传播异常 : 继续将异常传播给 父协程的父协程 ;

    1.5K10

    再议Python协程——从yield到asyncio

    如果我们能够自行调度自己写的程序,让一些代码块遇到IO操作时,切换去执行另外一些需要CPU操作的代码块,是不是节约了很多无畏的上下文切换呢?是的,协程就是针对这一情况而生的。...如果代码块A运行过程中,能够切换执行代码块B,又能够从代码块B再切换回去继续执行代码块A,这就实现了协程(通常是遇到IO操作时切换才有意义)。示意图如下: ?...4 协程库的实现及asyncio 有了前面对协程的了解,我们可以思考怎样去实现一个协程库?我觉得可以从以下两个个方面去思考: (1)事件循环 (event loop)。...事件循环需要实现两个功能,一是顺序执行协程代码;二是完成协程的调度,即一个协程“暂停”时,决定接下来执行哪个协程。 (2)协程上下文的切换。...asyncio中get_event_loop()就是事件循环,而装饰器@asyncio.coroutine标记了一个协程,并yield from 语法实现协程切换。

    2.2K71

    Python 学习笔记 | 异步IO (asyncio) 协程

    0x00 前言 之前对协程早有耳闻,但一直没有去学习,今天就来学习一下协程,再次感谢莫烦的教程。...可以交给asyncio执行的任务被称为协程, asyncio 即异步的意思,在 Python3 中这是一个仅使用单线程就能达到多线程、多进程效果的工具。...今天就来看看协程能不能干掉多线程和多进程。...0x01 基本用法 Python 的在 3.4 中引入了协程的概念,3.5 则确定了协程的语法,所以想使用协程处理 IO ,需要Python3.5 及以上的版本,下面是一个简单示例代码。...2 个任务执行了 2 秒 第 3 个任务执行了 3 秒 所有总共耗时 3.0029773712158203 这里运行了三个任务,三个任务的执行时间加在一起是6秒,但是最后总共耗时是3秒,接下来就看看协程在爬虫中的使用

    98820

    【Kotlin 协程】协程异常处理 ④ ( Android 协程中出现异常导致应用崩溃 | Android 协程中使用协程异常处理器捕获异常 | Android 全局异常处理器 )

    文章目录 一、Android 协程中出现异常导致应用崩溃 二、Android 协程中使用协程异常处理器捕获异常 三、Android 全局异常处理器 一、Android 协程中出现异常导致应用崩溃 --...------- PROCESS ENDED (26587) for package kim.hsl.coroutine ---------------------------- 二、Android 协程中使用协程异常处理器捕获异常...---- 在 Android 程序中 , 可以使用 协程异常处理器 CoroutineExceptionHandler 捕获异常 , 将其实例对象传递给 launch 协程构建器 作为参数即可 ; 该参数作为...协程上下文 的 协程异常处理器 CoroutineExceptionHandler 元素 ; 代码示例 : package kim.hsl.coroutine import android.os.Bundle...() } } } 执行结果 : 协程异常处理器 CoroutineExceptionHandler 捕获到了异常 ; 15:47:54.749 I 验证协程中抛出异常 15:

    2.6K10

    【Kotlin 协程】协程异常处理 ② ( SupervisorJob 协程 | supervisorScope 协程作用域构建器函数 )

    文章目录 一、SupervisorJob 协程 二、supervisorScope 协程作用域构建器函数 在上一篇博客介绍了 协程异常处理 【Kotlin 协程】协程异常处理 ① ( 根协程异常处理...| 自动传播异常 | 在协程体捕获异常 | 向用户暴露异常 | 在 await 处捕获异常 | 非根协程异常处理 | 异常传播特性 ) , 其中介绍了 协程中异常的传播特性 : 协程 运行时 , 产生异常..., 会将异常 传递给 父协程 , 父协程会执行如下操作 : ① 取消子协程 : 不仅仅取消产生异常的子协程 , 该父协程下所有的子协程都会取消 ; ② 取消父协程 : 将父协程本身取消 ; ③ 向父协程的父协程传播异常...: 继续将异常传播给 父协程的父协程 ; 这样就会导致 某个子协程一旦出现异常 , 则 兄弟协程 , 父协程 , 父协程的兄弟协程 , 父协程的父协程 等等 都会被取消 , 这样牵连太大 , 因此本篇博客中引入几种异常处理机制解决上述问题...; 一、SupervisorJob 协程 ---- SupervisorJob 协程 执行时如果 该类型的 子协程 出现异常 , 不会将 异常传递给 父协程 , 因此也不会影响到 父协程 下的 其它子协程

    1.3K10

    python asyncio 异步 IO - 协程(Coroutine)与运行

    前言 Python 在 3.5 版本中引入了关于协程的语法糖 async 和 await, 在 python3.7 版本可以通过 asyncio.run() 运行一个协程。...协程 coroutines 协程(coroutines)通过 async/await 语法进行声明,是编写 asyncio 应用的推荐方式。...--- 协程运行三种机制 要真正运行一个协程,asyncio 提供了三种主要机制: asyncio.run() 函数用来运行最高层级的入口点 “fun()” 函数 (参见上面的示例。...) 等待一个协程。 如: await asyncio.sleep(3) asyncio.create_task() 函数用来并发运行作为 asyncio 任务 的多个协程。...很多asyncio API都被设计成了可等待的。 主要有三类可等待对象: 协程coroutine 任务Task 未来对象Future。

    2.1K10

    通过 asyncio 实现基于协程的并发编程

    任务 — task 一个协程对象就是一个原生可以挂起的函数。 任务时对协程的进一步封装,其中记录了任务的状态等信息。...该 Task 对象的协程函数会抛出 CancelledError 异常。 如果在协程中捕获 CancelledError 异常,取消将会被抑制,但这是不推荐的做法。 4.4....不同之处在于,如果传递了 result,则会在协程完成时将其返回给调用者。 最后一个参数 loop 已经被废弃,预计将于 python3.10 移除。 6....并发执行协程 — asyncio.gather 使用协程最重要的当然是并发运行任务,asyncio 包中,gather 方法就是用来并发运行我们的一系列协程对象的。...参数 aws — 可等待对象集合 loop — 该参数已被废弃 return_exceptions — 是否等待返回时抛出异常,为 False 会立即抛出异常,否则在所有可等待对象运行完成后将异常聚合至结果列表返回

    98210

    【Kotlin 协程】协程异常处理 ⑤ ( 异常传播的特殊情况 | 取消子协程示例 | 子协程抛出异常后父协程处理异常时机示例 | 异常聚合 | 多个子协程抛出的异常会聚合到第一个异常中 )

    文章目录 一、异常传播的特殊情况 1、取消子协程示例 2、子协程抛出异常后父协程处理异常时机示例 二、异常聚合 ( 多个子协程抛出的异常会聚合到第一个异常中 ) 一、异常传播的特殊情况 ---- 在...【Kotlin 协程】协程异常处理 ① ( 根协程异常处理 | 自动传播异常 | 在协程体捕获异常 | 向用户暴露异常 | 在 await 处捕获异常 | 非根协程异常处理 | 异常传播特性 ) 博客中介绍到...协程 运行时 , 产生异常 , 会将异常 传递给 父协程 , 父协程会执行如下操作 : ① 取消子协程 : 不仅仅取消产生异常的子协程 , 该父协程下所有的子协程都会取消 ; ② 取消父协程 : 将父协程本身取消...; ③ 向父协程的父协程传播异常 : 继续将异常传播给 父协程的父协程 ; 但是也有特殊情况 : 协程 调用 Job#cancel() 函数 进行取消操作时 , 会 抛出 CancellationException...父协程 进行处理 ; 如果 父协程 有多个子协程 , 多个子协程 都抛出异常 , 父协程会等到 所有子协程 都执行完毕会后 , 再处理 异常 ; 1、取消子协程示例 在下面的代码中 , 在 父协程中

    1.3K10

    Python 协程 asyncio 极简入门与爬虫实战

    在了解了 Python 并发编程的多线程和多进程之后,我们来了解一下基于 asyncio 的异步IO编程--协程 01 协程简介 协程(Coroutine)又称微线程、纤程,协程不是进程或线程,其执行过程类似于...Python 函数调用,Python 的 asyncio 模块实现的异步IO编程框架中,协程是对使用 async 关键字定义的异步函数的调用; 一个进程包含多个线程,类似于一个人体组织有多种细胞在工作...我们再来看看使用协程会发生什么: import asyncio async def display(num): # 在函数前使用async关键字,变成异步函数 await asyncio.sleep(1...我们需要将协程对象放到一个事件循环中才能达到与其他协程对象协作的效果,因为事件循环会负责处理子程 序切换的操作。 简单的说就是让阻塞的子程序让出CPU给可以执行的子程序。...,协程不能直接运行,需要把协程 加入到事件循环中,由后者在适当的时候调用协程; 创建task任务对象 task任务对象是对协程对象的进一步封装; import asyncio async def func

    1.5K30

    【Kotlin 协程】协程取消 ① ( 协程作用域取消 | 协程作用域子协程取消 | 通过抛出异常取消协程 | Job#cancel 函数 | 自定义异常取消协程 )

    文章目录 一、协程取消 二、协程作用域取消 三、协程作用域子协程取消 四、通过抛出异常取消协程 1、Job#cancel 函数 2、默认异常取消协程 3、自定义异常取消协程 一、协程取消 ----...协程取消 : 取消协程作用域 : 取消 协程作用域 会将该作用域中的 所有 子协程 一同取消 ; 取消子协程 : 子协程 的取消 不会影响 同一层级的 兄弟协程的执行 ; 通过抛出异常取消协程 : 协程取消通常会通过...中 启动了 job0 和 job1 两个协程 , 取消了 job1 协程 , job1 协程没有执行完毕 , job0 协程执行完毕 ; 四、通过抛出异常取消协程 ---- 1、Job#cancel...= null) 取消协程时 , 可以传入一个 CancellationException 异常实例对象 , 也可以不传 , 默认为 null ; // 取消协程作用域中的子协程 job1.cancel(..."自定义 CancellationException 异常")) 由于报出的 CancellationException 异常是正常情况 , 如果需要查看该异常 , 需要在协程中使用 try catch

    1.9K20
    领券