协程的学习

可用资料

这篇文章主要学习于:张凯的协程浅谈
我的博客旅程也是在阅读了这位大神的博客开始的,我觉得这是一个很好的旅程,我逐渐开始学习整理,开源,回顾。之前的我主要是在知乎发已经写完的内容,自己的学习主要是 git + obsidian 的形式进行记录的,在阅读到这位大神的文章后,我搭建了自己的博客,然后开始学习更多的内容,实现文章归档、查询。
他的文章里谈论了协程、协程的思想、协程分类,然后是原理剖析,协程实现,协程测试。整体比较的详尽,这里我的文章主要是进行一次对比,把腾讯的fiber库和代码随想录的coroutine进行对比然后学习。

协程是什么

在软件开发中,我们常说进程、线程、协程,进程是操作系统分配资源的基本单位,线程是任务调度和执行的基本单位,而线程可以说是用户态下的线程,由程序员手动控制控制,同时,协程和用户态线程非常接近,用户态线程之间的切换不需要陷入内核,但部分操作系统中用户态线程的切换需要内核态线程的辅助。

概念 定义与本质 资源开销 调度方式 通信方式 适用场景
进程 操作系统资源分配的基本单位,拥有独立的内存空间。 高(独立内存、创建/销毁慢) 操作系统内核调度 IPC(管道、消息队列、共享内存等) CPU密集型任务、需要强隔离的场景
线程 CPU调度的基本单位,隶属于进程,共享进程内存。 中(共享内存、切换较快) 操作系统内核调度 直接读写共享数据(需加锁) I/O密集型 + 适度并发、利用多核
协程 用户态的轻量级线程,由程序自身控制调度。 极低(KB级栈、无内核切换) 用户代码显式让出/恢复 共享内存或消息传递(无需锁) 高并发I/O密集型(网络请求、文件读写)

整体而言,进程、线程、协程之间的关系可以如下展示:

有些时候,在执行一些操作(尤其是IO操作)时,不希望去做“创建一个新的线程”这种重量级的操作来异步处理,而是希望:在当前线程执行中,暂时切换到其他任务中执行,同时在IO真正准备好了之后,再切换回来继续执行。
因此可以利用协程,减少了线程的高频创建,避免了线程阻塞,极大程度降低了创建、上下文切换以及用户态切换导致的时间损耗。

线程内存分析

在有限资源下创建大量线程是极不合理的,线程数应与 CPU 核心数保持合理比例;当业务处理时间远小于 IO 耗时、线程切换频繁时,协程是更好的选择。

  • 线程数量受虚内存空间限制:x32 系统单进程可访问虚内存约 3GB,若每条线程栈按 10M 算,最多约 300 多条线程,过多还会因线程切换触发缺页中断。
  • 线程过多带来调度与竞争开销:x64 下创建 1 万线程、10 核 CPU 时,每线程每秒仅 1ms 时间片,业务总耗时约为 (n-1)\*1 + n\*0.001 秒;线程间大量资源竞争会让系统行为难以预测。
  • 线程栈是”上限虚存”而非实际占用:Linux 默认每线程栈上限 6~8MB,是虚存上限;真实栈随执行变化,可能只有几十字节,但系统维护线程仍需额外空间,线程数增加仍会抬高内存消耗。
  • 协程的价值:① 减少线程切换;② 简化异步编程;③ 为异步提供无锁方案;本质是用同步的写法实现异步的功能。