xMagicor

1. 背景知识简述 在大规模语言模型（LLM）训练/推理中，处于一些考量，比如单个 GPU 无法容纳整个模型或者为了减少冗余参数对显存的占用，通常会采用以下并行策略： Tensor Paralleli

👉 ThreadsPerBlock和Blocks的数量受哪些条件约束？ 1. 硬件限制（上限） (1) 线程与块维度约束 每个 Block 的最大线程数： $$ \text{ThreadsPerBlo

左值、右值、将亡值 因为 auto 和 decltype 的类型推导规则涉及到对 表达式值类别的区分，这里先简单介绍C++11以后的左值、右值和将亡值概念。 如果更具体的细分，除了上面三种值类别，还有

宏定义 概念 C/C++ 语言中的宏定义实现的是一个文本替换的功能，它使用#define命令用来将一个标识符定义为一个字符串，该标识符被称为宏名，被定义的字符串称为替换文本。 在预处理阶段，编译器会把

一、C++输入流输出流如何工作 流的概念 流（Stream）是计算机科学中一个重要的概念，用于描述数据的连续传输 ，流可以被视为一个数据通道，数据在这个通道中从源头流向目的地。 流的基本特性 方向性：

简单类型别名 对于简单的类型别名，两者用法类似： 在这种情况下，两者没有显著差异。 复杂类型别名 对于模板类型别名，typedef 的局限性就显现出来了，而 using 提供了更好的解决方案.

卷积各种算法图示 [1] Vincent Dumoulin, Francesco Visin - A guide to convolution arithmetic for deep learning

git本地由三个部分组成：工作区 和 暂存区 和 本地库。 .git目录才是仓库的灵魂，.git目录里面包括 暂存区 和 本地库，.git目录外的地方是工作区。

博客框架 202X年了，应该极少有人从0开始搭建网站了吧。 一个优秀的博客框架，可以帮助你快速、高效的搭建个人网站，让你事半功倍。