Entropy Rate Constancy in Text
Entropy Rate Constancy in Text
复制标题
文本中的熵率恒定性
DOI：
--
复制
发表时间：
2002
期刊：
影响因子：
--
通讯作者：
Eugene Charniak
中科院分区：
文献类型：
--
作者：
Dmitriy Genzel;Eugene Charniak
我们提出了一个支配语言生成的恒定率原则。我们表明，这一原则意味着局部熵度量（忽略语境）应随句子序号增加。我们通过三种不同方式测量熵，证明情况确实如此。我们还表明，这种效应既有词汇方面（使用哪些词）的原因，也有非词汇方面（如何使用这些词）的原因。
We present a constancy rate principle governing language generation. We show that this principle implies that local measures of entropy (ignoring context) should increase with the sentence number. We demonstrate that this is indeed the case by measuring entropy in three different ways. We also show that this effect has both lexical (which words are used) and non-lexical (how the words are used) causes.