出售本站【域名】【外链】

微技术-AI分享
更多分类

NLP中perplexity PPL指标

2025-02-21

前言 语言模型是什么呢? 范例界说:应付语言序列w1,w2,...,wnw_1,w_2,...,w_nw1​,w2​,...,wn​,语言模型便是计较该序列的概率,即 P(w1,w2,...,wn)P(w_1, w_2,...,w_n)P(w1​,w2​,...,wn​)。 通俗评释:判断一句话是不是咱们一般说的话,即是不是人话。如P(我,打,篮球)>P(篮球,打,我)。 这么怎么评价语言模型劣优呢?那里引见一个评价目标:perpleVity(猜忌度) 由于网上有不少对perpleVity的评释,那里