Rust

2025年11月01日更新 10 人订阅
原价: ¥ 6 限时优惠
专栏简介 Rust编程语言之错误处理 Rust 语言之 flod Rust编程语言之Cargo、Crates.io详解 Rust编程语言之枚举与模式匹配 Rust语言 - 接口设计的建议之受约束(Constrained) Rust编程语言之无畏并发 Rust语言 - 接口设计的建议之灵活(flexible) Rust语言 - 接口设计的建议之显而易见(Obvious) Rust语言 - 接口设计的建议之不意外(unsurprising) Rust 实战:构建实用的 CLI 工具 HTTPie Rust编程语言学习之高级特性 Rust内存管理揭秘:深度剖析指针与智能指针 解决Rust中数组和切片的编译时大小问题 《Rust编程之道》学习笔记一 Rust Async 异步编程 简易教程 使用 Async Rust 构建简单的 P2P 节点 Rust编程语言入门之模式匹配 Rust async 编程 Rust编程语言之编写自动化测试 Rust编程语言之函数式语言特性:迭代器和闭包 《Rust编程之道》学习笔记二 Rust Tips 比较数值 使用 Rust 开发一个微型游戏 Rust编程初探:深入理解Struct结构体 深入理解Rust中的内存管理:栈、堆与静态内存详解 深入理解 Rust 结构体:经典结构体、元组结构体和单元结构体的实现 深入掌握 Rust 结构体:从模板到实例化的完整指南 深入理解Rust中的结构体:逻辑与数据结合的实战示例 深入理解 Rust 枚举:从基础到实践 掌握Rust字符串的精髓:String与&str的最佳实践 全面解析 Rust 模块系统:实战案例与应用技巧 Rust 中的 HashMap 实战指南:理解与优化技巧 掌握Rust模式匹配:从基础语法到实际应用 Rust 中的面向对象编程:特性与实现指南 深入理解 Rust 的 Pin 和 Unpin:理论与实践解析 Rust Trait 与 Go Interface:从设计到实战的深度对比 从零开始:用 Rust 和 Axum 打造高效 Web 应用 Rust 错误处理详解:掌握 anyhow、thiserror 和 snafu Rust 如何优雅实现冒泡排序 链表倒数 K 节点怎么删?Python/Go/Rust 实战 用 Rust 玩转数据存储:JSON 文件持久化实战 Rust实战:打造高效字符串分割函数 如何高效学习一门技术:从知到行的飞轮效应 Rust 编程入门:Struct 让代码更优雅 Rust 编程:零基础入门高性能开发 用 Rust 写个猜数游戏,编程小白也能上手! Rust 入门教程:变量到数据类型,轻松掌握! 深入浅出 Rust:函数、控制流与所有权核心特性解析 从零开始:用 Rust 和 Axum 打造高效 Web 服务 Rust 集合类型解析:Vector、String、HashMap 深入浅出Rust:泛型、Trait与生命周期的硬核指南 Rust实战:博物馆门票限流系统设计与实现 用 Rust 打造高性能图片处理服务器:从零开始实现类似 Thumbor 的功能 Rust 编程入门实战:从零开始抓取网页并转换为 Markdown 深入浅出 Rust:高效处理二进制数据的 Bytes 与 BytesMut 实战 Rust智能指针:解锁内存管理的进阶之道 用 Rust 打造命令行利器:从零到一实现 mini-grep 解锁Rust代码组织:轻松掌握Package、Crate与Module Rust 所有权:从内存管理到生产力释放 深入解析 Rust 的面向对象编程:特性、实现与设计模式 Rust + Protobuf:从零打造高效键值存储项目 bacon 点燃 Rust:比 cargo-watch 更爽的开发体验 用 Rust 打造微型游戏:从零开始的 Flappy Dragon 开发之旅 函数式编程的Rust之旅:闭包与迭代器的深入解析与实践 探索Rust编程之道:从设计哲学到内存安全的学习笔记 精读《Rust编程之道》:吃透语言精要,彻底搞懂所有权与借用 Rust 避坑指南:搞定数值比较,别再让 0.1 + 0.2 != 0.3 困扰你! 告别 Vec!掌握 Rust bytes 库,解锁零拷贝的真正威力 告别竞态条件:基于 Axum 和 Serde 的 Rust 并发状态管理最佳实践 Rust 异步编程实践:从 Tokio 基础到阻塞任务处理模式 Rust 网络编程实战:用 Tokio 手写一个迷你 TCP 反向代理 (minginx) 保姆级教程:Zsh + Oh My Zsh 终极配置,让你的 Ubuntu 终端效率倍增 不止于后端:Rust 在 Web 开发中的崛起之路 (2024数据解读) Rust核心利器:枚举(Enum)与模式匹配(Match),告别空指针,写出优雅健壮的代码 Rust 错误处理终极指南:从 panic! 到 Result 的优雅之道 想用 Rust 开发游戏?这份超详细的入门教程请收好! 用 Rust 实现 HTTPie:一个现代 CLI 工具的构建过程 Rust 异步实战:从0到1,用 Tokio 打造一个高性能并发聊天室 深入 Rust 核心:彻底搞懂指针、引用与智能指针 Rust 生产级后端实战:用 Axum + sqlx 打造高性能短链接服务 深入 Rust 内存模型:栈、堆、所有权与底层原理 Rust 核心概念解析:引用、借用与内部可变性 掌握 Rust 核心:生命周期与借用检查全解析 Rust 内存布局深度解析:从对齐、填充到 repr 属性 Rust Trait 分派机制:静态与动态的抉择与权衡 Rust Thread::Builder 用法详解:线程命名与栈大小设置 Rust 泛型 Trait:关联类型与泛型参数的核心区别 Rust Scoped Threads 实战:更安全、更简洁的并发编程 Rust 核心设计:孤儿规则与代码一致性解析 Rust 实战:从零构建一个多线程 Web 服务器 Rust Web 开发实战:构建教师管理 API 硬核实战:从零到一,用 Rust 和 Axum 构建高性能聊天服务后端 Rust Web 开发实战:使用 SQLx 连接 PostgreSQL 数据库 硬核入门:从零开始,用 Actix Web 构建你的第一个 Rust REST API (推荐 🔥) Rust 并发编程:详解线程间数据共享的几种核心方法 Rust并发安全基石:Mutex与RwLock深度解析 Rust Web实战:构建优雅的 Actix Web 统一错误处理 煮咖啡里的大学问:用 Rust Async/Await 告诉你如何边烧水边磨豆 深入浅出:Rust 原子类型与多线程编程实践 Rust 并发编程利器:OnceCell 与 OnceLock 深度解析 Rust 懒人编程:LazyCell 与 LazyLock 的惰性哲学 Rust 入门精髓:详解 Enum 的三种魔法,从模式匹配到状态管理 Rust 字符串魔法:String 与 &str 的深度解析与实践 Rust 模块化编程:驾驭代码结构与可见性的三大法则 Rust 实用进阶:深度剖析 Rust 生命周期的奥秘 Rust 智能指针大揭秘:Box、Rc、Arc、Cow 深度剖析与应用实践 Rust 并发编程三步曲:Join、Arc<Mutex> 与 mpsc 通道同步实战 Rust 声明宏实战进阶:从基础定义到 #[macro_export] 与多规则重载 Rust 类型转换实战:利用 From/Into Trait 实现带 Default 容错的安全转换 Rust 实战:实现 FromStr Trait,定制化字符串 parse() 与精确错误报告 Rust 实战:TryFrom Trait——如何在类型转换中强制执行业务逻辑检查 Rust 泛型编程基石:AsRef 和 AsMut 的核心作用与实战应用 揭秘 Rust Unsafe 编程:程序员接管内存安全的契约与实践 Rust FFI 入门:extern、ABI 与底层符号链接解析 Rust性能优化:零内存拷贝的链表合并技术实战 Rust 进阶:用 NonNull 裸指针实现高性能双向链表 O(N) 反转实战 Rust实战:如何用泛型和特性实现一个高性能、通用的插入排序 Rust实战:深度解析二叉搜索树(BST)的实现,掌握泛型与内存安全 用 Rust 优雅实现图搜索核心算法:广度优先搜索 (BFS) 实战 Rust 多线程的高效等待术:park() 与 unpark() 信号通信实战 Rust 并发加速器:用 Condvar 实现线程间“精确握手”与高效等待 Rust 算法精讲:用 DFS 玩转图遍历,从起点“一走到底”的秘密 Rust 并发实战:用 MPSC 通道构建线程安全的“任务指挥中心” 一行代码提速 30 倍!Rust Rayon 并行计算:告别多线程管理困境 Rust 实战:使用自定义泛型栈实现高效、严谨的括号匹配算法 Rust 并行加速:4 个实操案例,深度解析 Rayon 线程池的 Fork-Join 与广播机制 Rust 实战:用两个队列实现栈——重温经典数据结构面试题 Rust Async/Await 实战:从串行到并发,掌握 block_on 与 join! 的异步魔力 Rust 异步编程基石:Tokio 运行时从入门到精通(单线程与多线程实战) 告别重复造轮子:用 Rust 实现一个可大可小的通用“万能”二叉堆! 💻 Rust 实战:从零开始实现一个无向带权图 Rust异步编程实战:彻底搞懂并发、并行与Tokio任务调度

Rust异步编程实战:彻底搞懂并发、并行与Tokio任务调度

Rust异步编程实战:彻底搞懂并发、并行与Tokio任务调度随着多核时代的到来,如何高效利用系统资源成为现代编程的关键挑战。在Rust语言中,异步编程(AsyncRust)凭借其零成本抽象和卓越的性能,成为了构建高并发系统的首选方案。然而,初学者常常混淆“并发”与“并行”,也不清楚强大的T

Rust异步编程实战:彻底搞懂并发、并行与Tokio任务调度

随着多核时代的到来,如何高效利用系统资源成为现代编程的关键挑战。在 Rust 语言中,异步编程(Async Rust)凭借其零成本抽象和卓越的性能,成为了构建高并发系统的首选方案。然而,初学者常常混淆“并发”与“并行”,也不清楚强大的 Tokio 运行时是如何调度和管理任务的。本文将从底层定义出发,通过厨房做饭的生动类比,并结合具体的 Rust 代码示例和运行结果分析,彻底解析异步 Rust 中的并发、并行以及 tokio::join!JoinSet 等核心机制,带您领略高效任务调度的奥秘。

Async Rust - 并发 VS 并行

并发 VS 并行 Concurrency vs Parallelism Async Rust

并发 VS 并行

image-20251029175354104.png

🧩 一、定义对比

概念 含义 核心关注点
并发 (Concurrency) 在同一时间段内,系统可以同时处理多个任务的“逻辑结构”。这些任务可能是交替执行的。 “任务之间如何协调切换”
并行 (Parallelism) 在同一时刻,系统真的在“物理上”同时执行多个任务(例如多个 CPU 核同时运行)。 “任务是否真正同时执行”

📖 简单说:

并发是「看起来同时」, 并行是「真的同时」。


🧠 二、类比理解

想象你在厨房做饭 🍳:

  • 并发:你一个人炒菜、煮汤、蒸饭。你在三个任务之间来回切换。虽然是一个人,但三个任务“看起来”在同时进行。
  • 并行:你和朋友三个人,各自负责炒菜、煮汤、蒸饭,真的在同时进行。

👉 所以:

并发 = 切换快,看起来同时。 并行 = 多人多核,真正同时。


⚙️ 三、技术层面区别

项目 并发 (Concurrency) 并行 (Parallelism)
目的 提高任务的响应性 提高程序的执行速度
实现方式 时间片轮转、协程、异步 I/O 多核 CPU、多线程、GPU 计算
是否同时执行 逻辑上同时,物理上交替 真正同时
关键技术 异步编程、事件循环(如 Node.js、Tokio) 多线程、分布式计算
典型语言/框架 Python asyncio、Go goroutine、Rust async C++ OpenMP、CUDA、Ray
瓶颈 调度开销、共享资源竞争 线程数、核数、内存带宽

💻 四、例子说明

1️⃣ 并发(单核异步)

import asyncio

async def task(name, delay):
    await asyncio.sleep(delay)
    print(f"{name} done")

async def main():
    await asyncio.gather(
        task("A", 2),
        task("B", 1),
        task("C", 3)
    )

asyncio.run(main())

🔹 实际上是单核运行,通过 协程切换 实现“同时”执行的效果。 🔹 这就是并发:交替执行

2️⃣ 并行(多核线程)

from multiprocessing import Pool
import time

def task(n):
    time.sleep(2)
    return n*n

if __name__ == "__main__":
    with Pool(4) as p:
        results = p.map(task, [1,2,3,4])
    print(results)

🔹 使用 4 个 CPU 核同时执行任务。 🔹 这是真正的 并行物理同时执行

🔗 五、并发与并行的关系

并行 ⊂ 并发

也就是说:

  • 并发是一种设计思想
  • 并行是一种执行方式
  • 有并发,不一定有并行;
  • 但有并行,必然也是并发的一种表现。

📊 形象图:

          并发 (Concurrency)
        ┌──────────────────────┐
        │                      │
        │   并行 (Parallelism) │
        │     ← 子集关系       │
        └──────────────────────┘

🚀 六、总结一句话记忆法

关键词 口诀
并发 “我一个人做多件事”——切换快,看起来同时
并行 “我找多人同时干”——真正在同时执行
关系 并行是并发的实现方式之一
典型应用 并发→异步 I/O;并行→多核加速

异步挂起/恢复

Async Suspend/Resume

异步挂起/恢复(Async Suspend/Resume)是指在异步执行中,当任务遇到无法立即完成的操作时暂停执行(挂起),待条件满足后再从暂停点继续执行(恢复),以实现高效的并发处理。

系统线程 VS 绿色线程 Async Rust

OS Threads VS Green Threads

示例一

async fn hello() {
    println!("Hello, world!");
}

async fn run() {
    for i in 0..10 {
        println!("{i}");
    }
}

#[tokio::main]
async fn main() {
    tokio::spawn(run());
    hello().await;
}

这段 Rust 代码展示了异步编程的基本用法,使用了流行的异步运行时 Tokio

详细解释:

  1. async fn hello()async fn run():
    • async fn 关键字定义了异步函数。调用这些函数并不会立即执行它们里面的代码,而是返回一个表示异步操作Future(一个尚未完成的计算)。
    • hello 函数非常简单,它会打印一次 "Hello, world!"。
    • run 函数会执行一个简单的循环,打印数字 $0$ 到 $9$。
  2. #[tokio::main]:
    • 这是一个 Tokio 提供的宏,用于标记程序的入口点 main 函数。
    • 它将 async fn main() 转换为一个同步的 main 函数,这个同步 main 函数负责初始化 Tokio 异步运行时(Runtime),然后在这个运行时上执行异步的 main 函数体。
    • 异步运行时是执行和调度异步任务(Future)的核心组件。
  3. async fn main():
    • 这是程序的逻辑起点。
    • tokio::spawn(run());:
      • tokio::spawn() 是 Tokio 运行时提供的方法,用于在异步运行时启动一个新的异步任务(一个 Future)。
      • 这里它接收 run() 返回的 Future,并将其非阻塞地调度到后台运行。这意味着 run 函数中的循环将与主任务(main 函数的其余部分)并发执行。
      • tokio::spawn() 立即返回一个JoinHandle,但代码中没有接收或使用它。
    • hello().await;:
      • hello() 调用返回一个 Future。
      • .await 运算符用于暂停当前异步任务(这里是 main 函数)的执行,等待它所修饰的 Future(hello() 的结果)完成。
      • hello() 完成(即打印出 "Hello, world!")后,main 函数才会继续执行。
      • 注意: await 只在 async 函数/块内使用

总结执行流程:

  1. 程序启动,#[tokio::main] 宏初始化 Tokio 运行时并开始执行 async main
  2. tokio::spawn(run());run 任务(打印 $0-9$)被提交给运行时,开始在后台并发执行
  3. hello().await;main 任务暂停,等待 hello 函数执行完毕(打印 "Hello, world!")。
  4. main 任务等待时,Tokio 运行时可以切换到执行其他任务,例如并发运行的 run 任务
  5. hello 任务执行完毕后,main 任务恢复,程序结束。

由于 run并发执行的,因此 run 中打印的数字 $0-9$ 和 hello 中打印的 "Hello, world!" 在控制台的出现顺序是不确定的,取决于 Tokio 运行时对这两个任务的调度情况。run 任务可能会在 "Hello, world!" 之前、之后或中间穿插打印。

运行

➜ cargo run              
   Compiling scopeguard v1.2.0
   Compiling smallvec v1.15.1
   Compiling cfg-if v1.0.4
   Compiling bytes v1.10.1
   Compiling pin-project-lite v0.2.16
   Compiling libc v0.2.177
   Compiling lock_api v0.4.14
   Compiling parking_lot_core v0.9.12
   Compiling mio v1.1.0
   Compiling signal-hook-registry v1.4.6
   Compiling socket2 v0.6.1
   Compiling parking_lot v0.12.5
   Compiling tokio v1.48.0
   Compiling rust_os_threads v0.1.0 (/Users/qiaopengjun/Code/Rust/RustJourney/rust_os_threads)
    Finished `dev` profile [unoptimized + debuginfo] target(s) in 3.17s
     Running `target/debug/rust_os_threads`
Hello, world!
0
1
2
3
4
5
6
7
8
9

💻 运行结果解释

1. 编译阶段 (Compiling & Finished)

这是 Rust 的构建工具 cargo 执行 cargo run 命令时首先完成的工作:

  • Compiling ...: 这一系列行表示 Cargo 正在编译项目及其依赖项。由于您的代码使用了 #[tokio::main],它依赖于 Tokio 运行时,因此 Cargo 会编译如 tokiomiobytes 等一系列相关的异步和低级系统库。
  • Compiling rust_os_threads v0.1.0 (...): 这是在编译您的本地项目(项目名称为 rust_os_threads)。
  • Finished ... target(s) in 3.17s: 表示编译过程成功完成,生成了调试版本 (dev profile) 的可执行文件。

2. 运行阶段 (Running & Output)

编译成功后,Cargo 接着执行生成的可执行文件:

  • Running target/debug/rust_os_threads: Cargo 启动了编译好的程序。
  • Hello, world!: 这是由您的 hello() 异步函数打印的输出。在 main 函数中,hello().await; 会确保这个任务完成。
  • 09: 这是由您的 run() 异步函数打印的输出。在 main 函数中,tokio::spawn(run()); 将此任务并发地调度到后台。

关键点在于输出的顺序:

程序首先等待 hello().await 完成,因此 Hello, world! 被打印出来。然后,由于 run 任务是并发运行的,Tokio 运行时在执行 hello 和等待其完成的过程中,也同时调度了 run 任务。在这个特定的运行实例中,run 任务在 hello 任务完成后才开始或继续执行,所以打印 $0$ 到 $9$ 的循环是在 Hello, world! 之后连续完成的。如果调度顺序不同,0-9 的输出可能会出现在 Hello, world! 之前或中间。

系统线程 OS Threads 绿色线程 Green Threads
更高效的利用多 CPU / 核 轻量,开销小
开销更大:Context Switching,资源管理等 不依靠额外机制的话,难以高效利用多 CPU / 内核
创建大量 OS 线程会导致资源紧张 轻松创建成千上万,乃至百万级的并发任务
每个线程需要大量的内存 更具扩展性,高并发
阻塞操作,OS 来处理 由运行时更高效的处理阻塞操作
不同 OS 间的行为、性能可能差...

剩余50%的内容订阅专栏后可查看

点赞 0
收藏 0
分享
本文参与登链社区写作激励计划 ,好文好收益,欢迎正在阅读的你也加入。

0 条评论

请先 登录 后评论