Rust异步编程实战:彻底搞懂并发、并行与Tokio任务调度随着多核时代的到来,如何高效利用系统资源成为现代编程的关键挑战。在Rust语言中,异步编程(AsyncRust)凭借其零成本抽象和卓越的性能,成为了构建高并发系统的首选方案。然而,初学者常常混淆“并发”与“并行”,也不清楚强大的T
随着多核时代的到来,如何高效利用系统资源成为现代编程的关键挑战。在 Rust 语言中,异步编程(Async Rust)凭借其零成本抽象和卓越的性能,成为了构建高并发系统的首选方案。然而,初学者常常混淆“并发”与“并行”,也不清楚强大的 Tokio 运行时是如何调度和管理任务的。本文将从底层定义出发,通过厨房做饭的生动类比,并结合具体的 Rust 代码示例和运行结果分析,彻底解析异步 Rust 中的并发、并行以及 tokio::join!、JoinSet 等核心机制,带您领略高效任务调度的奥秘。
并发 VS 并行 Concurrency vs Parallelism Async Rust

| 概念 | 含义 | 核心关注点 |
|---|---|---|
| 并发 (Concurrency) | 在同一时间段内,系统可以同时处理多个任务的“逻辑结构”。这些任务可能是交替执行的。 | “任务之间如何协调切换” |
| 并行 (Parallelism) | 在同一时刻,系统真的在“物理上”同时执行多个任务(例如多个 CPU 核同时运行)。 | “任务是否真正同时执行” |
📖 简单说:
并发是「看起来同时」, 并行是「真的同时」。
想象你在厨房做饭 🍳:
👉 所以:
并发 = 切换快,看起来同时。 并行 = 多人多核,真正同时。
| 项目 | 并发 (Concurrency) | 并行 (Parallelism) |
|---|---|---|
| 目的 | 提高任务的响应性 | 提高程序的执行速度 |
| 实现方式 | 时间片轮转、协程、异步 I/O | 多核 CPU、多线程、GPU 计算 |
| 是否同时执行 | 逻辑上同时,物理上交替 | 真正同时 |
| 关键技术 | 异步编程、事件循环(如 Node.js、Tokio) | 多线程、分布式计算 |
| 典型语言/框架 | Python asyncio、Go goroutine、Rust async | C++ OpenMP、CUDA、Ray |
| 瓶颈 | 调度开销、共享资源竞争 | 线程数、核数、内存带宽 |
import asyncio
async def task(name, delay):
await asyncio.sleep(delay)
print(f"{name} done")
async def main():
await asyncio.gather(
task("A", 2),
task("B", 1),
task("C", 3)
)
asyncio.run(main())
🔹 实际上是单核运行,通过 协程切换 实现“同时”执行的效果。 🔹 这就是并发:交替执行。
from multiprocessing import Pool
import time
def task(n):
time.sleep(2)
return n*n
if __name__ == "__main__":
with Pool(4) as p:
results = p.map(task, [1,2,3,4])
print(results)
🔹 使用 4 个 CPU 核同时执行任务。 🔹 这是真正的 并行:物理同时执行。
并行 ⊂ 并发
也就是说:
📊 形象图:
并发 (Concurrency)
┌──────────────────────┐
│ │
│ 并行 (Parallelism) │
│ ← 子集关系 │
└──────────────────────┘
| 关键词 | 口诀 |
|---|---|
| 并发 | “我一个人做多件事”——切换快,看起来同时 |
| 并行 | “我找多人同时干”——真正在同时执行 |
| 关系 | 并行是并发的实现方式之一 |
| 典型应用 | 并发→异步 I/O;并行→多核加速 |
异步挂起/恢复(Async Suspend/Resume)是指在异步执行中,当任务遇到无法立即完成的操作时暂停执行(挂起),待条件满足后再从暂停点继续执行(恢复),以实现高效的并发处理。
async fn hello() {
println!("Hello, world!");
}
async fn run() {
for i in 0..10 {
println!("{i}");
}
}
#[tokio::main]
async fn main() {
tokio::spawn(run());
hello().await;
}
这段 Rust 代码展示了异步编程的基本用法,使用了流行的异步运行时 Tokio。
async fn hello() 和 async fn run():
async fn 关键字定义了异步函数。调用这些函数并不会立即执行它们里面的代码,而是返回一个表示异步操作的Future(一个尚未完成的计算)。hello 函数非常简单,它会打印一次 "Hello, world!"。run 函数会执行一个简单的循环,打印数字 $0$ 到 $9$。#[tokio::main]:
main 函数。async fn main() 转换为一个同步的 main 函数,这个同步 main 函数负责初始化 Tokio 异步运行时(Runtime),然后在这个运行时上执行异步的 main 函数体。async fn main():
tokio::spawn(run());:
tokio::spawn() 是 Tokio 运行时提供的方法,用于在异步运行时上启动一个新的异步任务(一个 Future)。run() 返回的 Future,并将其非阻塞地调度到后台运行。这意味着 run 函数中的循环将与主任务(main 函数的其余部分)并发执行。tokio::spawn() 立即返回一个JoinHandle,但代码中没有接收或使用它。hello().await;:
hello() 调用返回一个 Future。.await 运算符用于暂停当前异步任务(这里是 main 函数)的执行,等待它所修饰的 Future(hello() 的结果)完成。hello() 完成(即打印出 "Hello, world!")后,main 函数才会继续执行。await 只在 async 函数/块内使用。#[tokio::main] 宏初始化 Tokio 运行时并开始执行 async main。tokio::spawn(run());:run 任务(打印 $0-9$)被提交给运行时,开始在后台并发执行。hello().await;:main 任务暂停,等待 hello 函数执行完毕(打印 "Hello, world!")。main 任务等待时,Tokio 运行时可以切换到执行其他任务,例如并发运行的 run 任务。hello 任务执行完毕后,main 任务恢复,程序结束。由于 run 是并发执行的,因此 run 中打印的数字 $0-9$ 和 hello 中打印的 "Hello, world!" 在控制台的出现顺序是不确定的,取决于 Tokio 运行时对这两个任务的调度情况。run 任务可能会在 "Hello, world!" 之前、之后或中间穿插打印。
➜ cargo run
Compiling scopeguard v1.2.0
Compiling smallvec v1.15.1
Compiling cfg-if v1.0.4
Compiling bytes v1.10.1
Compiling pin-project-lite v0.2.16
Compiling libc v0.2.177
Compiling lock_api v0.4.14
Compiling parking_lot_core v0.9.12
Compiling mio v1.1.0
Compiling signal-hook-registry v1.4.6
Compiling socket2 v0.6.1
Compiling parking_lot v0.12.5
Compiling tokio v1.48.0
Compiling rust_os_threads v0.1.0 (/Users/qiaopengjun/Code/Rust/RustJourney/rust_os_threads)
Finished `dev` profile [unoptimized + debuginfo] target(s) in 3.17s
Running `target/debug/rust_os_threads`
Hello, world!
0
1
2
3
4
5
6
7
8
9
这是 Rust 的构建工具 cargo 执行 cargo run 命令时首先完成的工作:
Compiling ...: 这一系列行表示 Cargo 正在编译项目及其依赖项。由于您的代码使用了 #[tokio::main],它依赖于 Tokio 运行时,因此 Cargo 会编译如 tokio、mio、bytes 等一系列相关的异步和低级系统库。Compiling rust_os_threads v0.1.0 (...): 这是在编译您的本地项目(项目名称为 rust_os_threads)。Finished ... target(s) in 3.17s: 表示编译过程成功完成,生成了调试版本 (dev profile) 的可执行文件。编译成功后,Cargo 接着执行生成的可执行文件:
Running target/debug/rust_os_threads: Cargo 启动了编译好的程序。Hello, world!: 这是由您的 hello() 异步函数打印的输出。在 main 函数中,hello().await; 会确保这个任务完成。0 到 9: 这是由您的 run() 异步函数打印的输出。在 main 函数中,tokio::spawn(run()); 将此任务并发地调度到后台。关键点在于输出的顺序:
程序首先等待 hello().await 完成,因此 Hello, world! 被打印出来。然后,由于 run 任务是并发运行的,Tokio 运行时在执行 hello 和等待其完成的过程中,也同时调度了 run 任务。在这个特定的运行实例中,run 任务在 hello 任务完成后才开始或继续执行,所以打印 $0$ 到 $9$ 的循环是在 Hello, world! 之后连续完成的。如果调度顺序不同,0-9 的输出可能会出现在 Hello, world! 之前或中间。
| 系统线程 OS Threads | 绿色线程 Green Threads |
|---|---|
| 更高效的利用多 CPU / 核 | 轻量,开销小 |
| 开销更大:Context Switching,资源管理等 | 不依靠额外机制的话,难以高效利用多 CPU / 内核 |
| 创建大量 OS 线程会导致资源紧张 | 轻松创建成千上万,乃至百万级的并发任务 |
| 每个线程需要大量的内存 | 更具扩展性,高并发 |
| 阻塞操作,OS 来处理 | 由运行时更高效的处理阻塞操作 |
| 不同 OS 间的行为、性能可能差... |
如果觉得我的文章对您有用,请随意打赏。你的支持将鼓励我继续创作!