​bpe什么意思

bpe什么意思

bpe是一种应用于电脑上的编码计算方式以及对应的解码程序。

原词组为byte pair encoder，各取其第一个字母简称为bpe。

这个词组翻译成中文为：字节对编码。

它的主要目的是为了数据压缩。

即算法描述为字符串里频率出现的一对字符，用一个没有在这个字符中出现的字符所代替的层层迭代的过程。