Liuyi Wen's Blog
搜索
归档
全部文章 - 50
2025
2025-09-25
并行训练系列：5. Megatron 之分布式环境初始化
2025-09-18
并行训练系列：4. 张量并行（TP）
2025-09-17
并行训练系列：3. 数据并行下篇（DeepSeed-ZeRO）
2025-09-16
并行训练系列：2. 数据并行上篇（DP，DDP）
2025-09-15
RL 系列：2. 从 Bellman 算子的角度解释策略迭代/价值迭代
2025-09-08
RL 系列：1. Markov 决策过程
2025-09-03
并发系列：2. Go 的长连接
2025-07-18
Go-内存分配器
2025-07-17
Go-调度器
2025-07-14
并发系列：1. 自旋锁
1
2
3
…
5
Liuyi Wen
文章
50
标签
5
分类
9
Follow Me
公告
The Journey Is the Reward.
最新文章
并行训练系列：7. Flash Attention V1/V2
2025-12-16
RL 系列：5. 从 TRPO 到 PPO 算法
2025-12-08
并行训练系列：6. 序列并行上篇（Megatron-SP, DeepSpeed-Ulysses）
2025-12-01
verl 框架：3. 加载数据与创建 batch
2025-11-24
RL 系列：4. 策略梯度算法
2025-11-17
分类
Database
6
Distributed System
1
High Concurrency
2
Network
1
OS
3
Parallelism
8
RL
5
Transformer
4
标签
KV Cache
Go
OOP
Web Platforms Display
C++
归档
十二月 2025
3
十一月 2025
3
九月 2025
11
七月 2025
5
六月 2025
1
五月 2025
4
四月 2025
7
三月 2025
16
网站信息
文章数目 :
50
本站访客数 :
本站总浏览量 :
最后更新时间 :
搜索
