5. 状态机真相 🟢
你将学到:
- 编译器如何将
async fn转换为枚举状态机- 源码与生成的各状态之间的对照分析
- 为什么
async fn中巨大的栈分配会导致 future 体积膨胀- Drop 优化:不再需要的值会立即被释放
编译器究竟生成了什么
当你编写 async fn 时,编译器会将你看起来像是顺序执行的代码转换为基于枚举的状态机。理解这一转换过程是掌握 async Rust 性能特性以及理解其设计哲学的关键。
源码与状态机对照
#![allow(unused)]
fn main() {
// 你写的源码:
async fn fetch_two_pages() -> String {
let page1 = http_get("https://example.com/a").await;
let page2 = http_get("https://example.com/b").await;
format!("{page1}\n{page2}")
}
}
编译器生成的模型在概念上类似于以下代码:
#![allow(unused)]
fn main() {
enum FetchTwoPagesStateMachine {
// 状态 0:准备为 page1 调用 http_get
Start,
// 状态 1:等待 page1,持有相应的 future
WaitingPage1 {
fut1: HttpGetFuture,
},
// 状态 2:拿到 page1,等待 page2
WaitingPage2 {
page1: String,
fut2: HttpGetFuture,
},
// 终止状态
Complete,
}
impl Future for FetchTwoPagesStateMachine {
type Output = String;
fn poll(mut self: Pin<&mut Self>, cx: &mut Context<'_>) -> Poll<String> {
loop {
match self.as_mut().get_mut() {
Self::Start => {
let fut1 = http_get("https://example.com/a");
*self.as_mut().get_mut() = Self::WaitingPage1 { fut1 };
}
Self::WaitingPage1 { fut1 } => {
let page1 = match Pin::new(fut1).poll(cx) {
Poll::Ready(v) => v,
Poll::Pending => return Poll::Pending,
};
let fut2 = http_get("https://example.com/b");
*self.as_mut().get_mut() = Self::WaitingPage2 { page1, fut2 };
}
Self::WaitingPage2 { page1, fut2 } => {
let page2 = match Pin::new(fut2).poll(cx) {
Poll::Ready(v) => v,
Poll::Pending => return Poll::Pending,
};
let result = format!("{page1}\n{page2}");
*self.as_mut().get_mut() = Self::Complete;
return Poll::Ready(result);
}
Self::Complete => panic!("polled after completion"),
}
}
}
}
}
注意:这种“脱糖 (desugaring)”是 概念性 的。真实的编译器输出会使用
unsafe投影 —— 这里显示的get_mut()需要Unpin才能调用,但生成的异步状态机实际上是!Unpin的。这里的目的是阐明状态是如何转换的。
stateDiagram-v2
[*] --> Start
Start --> WaitingPage1: 创建第一个 http_get future
WaitingPage1 --> WaitingPage1: poll() → Pending
WaitingPage1 --> WaitingPage2: poll() → Ready(page1)
WaitingPage2 --> WaitingPage2: poll() → Pending
WaitingPage2 --> Complete: poll() → Ready(page2)
Complete --> [*]: 返回结合后的字符串
各状态存储的内容:
- WaitingPage1 — 存储
fut1: HttpGetFuture(此时还没开始分配 page2)。- WaitingPage2 — 存储
page1: String和fut2: HttpGetFuture(此时fut1已经被销毁释放)。
为什么这对性能至关重要
零成本:状态机是一个分配在栈上的枚举。每一个 future 都没有默认的堆分配,没有 GC 压力,没有装箱(boxing)—— 除非你显式使用 Box::pin()。
尺寸 (Size):枚举的大小取决于它所有变体中最大的那一个。每个 .await 都会创建一个新变体。这意味着:
#![allow(unused)]
fn main() {
async fn small() {
let a: u8 = 0;
yield_now().await;
let b: u8 = 0;
yield_now().await;
}
// 尺寸很小,基本就是变体最大值 + 判别码
async fn big() {
let buf: [u8; 1_000_000] = [0; 1_000_000]; // 在栈上分配了 1MB!
some_io().await;
process(&buf);
}
// 尺寸巨大 ≈ 1MB + 内部 future。
// ⚠️ 警告:不要在异步函数中在栈上分配巨大的数组!请改用 Vec<u8> 或 Box<[u8]>。
}
Drop 优化:当状态机发生迁移时,它会销毁不再需要的值。在上例中,当我们切换到 WaitingPage2 时,fut1 会被立即 Drop。
实践法则:在
async fn中使用巨大的栈空间会导致生成的 future 体积剧增。如果你在异步代码中遇到栈溢出,请检查是否有大数组。如有必要,使用Box::pin()将子任务放到堆上。
练习:解析状态机
🏋️ 练习
挑战:分析以下异步函数,描述编译器生成的枚举。它有多少个状态?每个状态大约需要存储什么?
#![allow(unused)]
fn main() {
async fn pipeline(url: &str) -> Result<usize, Error> {
let response = fetch(url).await?;
let body = response.text().await?;
let parsed = parse(body).await?;
Ok(parsed.len())
}
}
🔑 参考答案
包含五个主要状态:
- Start — 记录初始化信息,如
url。 - WaitingFetch — 存储
url指针和fetch执行中的 future。 - WaitingText — 存储返回的
response和解析文本的 future。 - WaitingParse — 存储
body字符串和解析逻辑的 future。 - Done — 任务结束。
每个 .await 都会导致状态的分裂。? 操作符提供了提前返回的路径,但并不增加枚举状态的数量 —— 它只是在 Poll::Ready 返回值上加了一层 match 逻辑。
关键要点:状态机真相
async fn会被编译为一个枚举,每个.await对应一个状态变体。- Future 的物理尺寸取决于所有状态中最大的那一个 —— 巨大的局部变量会撑爆尺寸。
- 编译器会自动处理状态切换时的 Drop 动作。
- 当 future 体积过大影响性能或导致栈溢出时,请考虑使用
Box::pin()。
延伸阅读: 第 4 章:Pin 与 Unpin 了解为什么生成的枚举必须被固定,第 6 章:手写 Future 尝试自己手写这种状态机。