随着 AI 技术突飞猛进的发展，各种大模型的上限虽然在不断增强，但模型有的时候似乎有点学会偷懒了。典型的现象是，有时模型在回答问题时可能会放弃寻找多样的可能性，直接偷懒给类似提问一个最普通同时也最不容

Hello，大家好，祝JYM中秋快乐，阖家团圆。节前最后一篇，陪你走到最后一刻。🥗🥗🥗本节将为大家介绍GPT和BERT的原理，一起来学学叭。🍚🍚🍚

BERT inputs 切词方法 BERT的切词方法用的是WordPiece embeddings，其思想是如果一个词在整个里面出现的概率不大的话，就应该把它切开，看他的一个子序列，如果它的一个子序列