归档

文章归档

共 9 篇文章

2026

10-252026

实现利用公网 Linux 服务器访问位于内网的 Linux 机器，并以公钥认证登陆内网 SSH（本文省略 SSH 服务的部署流程）

10-202026

10-092026

从 minikube 开始部署 k8s 环境，学习其架构与运行原理。

09-172026

记录卫星转发器增益的计算流程与注意事项。

09-112026

从随机梯度下降的局限性引出 Adam 优化器，并分析其实现机制、优势与限制。

09-092026

大模型训练的本质不只是把计算摊到更多 GPU 上，而是把 Transformer 的不同维度映射到不同 GPU，并控制由此产生的通信、显存占用、流水线空泡与负载不均衡。

09-092026

剖析 FA 与 FA-2 两篇论文中的 IO 优化、Softmax 与 GPU 并行设计。

09-082026

大规模 MoE 的架构、路由、通信与 Scaling。

09-072026

概述语言模型的缩放定律与计算最优训练两篇论文，强调模型参数量、训练数据量与算力合理配置。

09-032026

NVIDIA GPU 训练性能下降、NCCL Hang、GPU 掉卡、NVLink 性能异常、单机或多机通信异常等问题的排故方法。