编码总结

python 中提供了几种重要的数据压缩算法的支持，包括 zlib、gzip、bzip2 和 lzma 数据压缩算法，同时支持创建 ZIP 和 tar 格式的归档文件，这些归档格式也同样支持这些压缩算

PyTorch 提供了一种非常方便的节省显存的方式，就是 Checkpoint 机制。这篇文章的目的在于更透彻的了解其内在的机制。

PyTorch 使用中，由于显卡显存是固定的，并且短期内难以进一步提升，所以掌握显存具体占用的细节有助于我们写出更加高效的代码，甚至跑出更好的结果。

Pytorch之Spatial-Shift-Operation的5种实现策略。这是一种巧妙地替换局部卷积的策略。

BN是CNN中一种常用的操作和模块。再具体的实现中，其在包含多个参数，在不同的训练和测试状态下，不同的参数组合会带来不同的效果。

关于 barrier 这个概念可以参考 Wiki 中的介绍：同步屏障(Barrier)是并行计算中的一种同步方法。对于一群进程或线程，程序中的一个同步屏障意味着任何线程/进程执行到此后必须等待，直到所

one-hot 形式的编码在深度学习任务中非常常见，但是却并不是一种很自然的数据存储方式。所以大多数情况下都需要我们自己手动转换。