NLP

NLP

NLP

NLP相关技术分享

暂无订阅共1篇文章创建于2023-03-23

bert入门之分词源码解析

bert编码方法总结：其实就是分词+分词后的切片映射id 1.分词：通过BasicTokenizer分词后，遍历每一个分词，将每一个词再经过WordpieceTokenizer分成子串 2.编码：

2年前
527
点赞
评论