torchtext中vocab的基本使用
pytorch吧
全部回复
仅看楼主
level 11
sealed_ss 楼主
我们平时在使用pytorch处理一些文本数据的时候，通常要将文本序列化，也就是将文本中的每个词转换为对应的数字标记。编码实现序列化功能并不麻烦，但是torchtext已经为我们准备好了一个简单易用的Vocab类，Vocab封装了一些常用的功能，在一般情况下够用了。我这里记录一下它的简单的使用方法，供需要的人查阅。
一张截图装不下，所以分开来截图：
2023年04月09日 03点04分 1
level 11
sealed_ss 楼主
[汗]网页贴吧居然不能将帖子分区...手机贴吧又太难用...
2023年04月09日 03点04分 2
1