Wokcin
0获赞0粉丝0关注
如何理解语言模型在文字识别中的应用,以及未来趋势?
这是我之前在华为写的一篇博客,方便大家进行近期的语言模型理解,我就重新整理了一遍。
一、语言模型定义
1.定义。首先先讲下什么是语言模型吧,如下图所示,顾名思义,语言模型即根据当前语境的上下文推断当前句子的意思。具体的标准定义为:对于语言序列w1, w2, …wn,语言模型就是计算该序列的概率即P(w1, w2, …wn)。转换成具体的公式就是xi = g(x1,...,xi-1,xi+1,...,xN ).
2.为什么需要语言模型?文本图像中包含两层信息:视觉纹理信息和语言信息。由于单纯根据视觉纹理信息进行文字识别缺少了对上下文的字符语义信息的挖掘,时常会导致错误的文本识别结果(之后会详细说明)。因此如何获得鲁棒的语言信息来
Wokcin
0