信息增益(Kullback–Leibler divergence)又叫做information divergence,relative entropy 或者KLIC。 在概率论和信息论中,信息增益是非对称的,用以度量两种概率分布P和Q的差异。信息增益描述了当使用Q进行编码时,再使用P进行编码的差异。通常P代表样本或观察值的分布,也有可能是精确计算的理论分布。Q代表一种理论,模型,描述或者对P的近似。
... 上述的ID3算法的核心问题是选取在树的每个结点要测试的属性。我们希望选择的是最有利于分类实例的属性,信息增益(Information Gain)是用来衡量给定的属性区分训练样例的能力,而ID3算法在增长树的每一步使用信息增益从候选属性中选择属性。
基于945个网页-相关网页
为方便计,用 CEORS1 表示 以 信息增益 ( Info Gain ) 作为每个特征的评价函数, 由WFS 得到的优化子空间; 用表示 CEORS2 表示 以LSA 进行降维. 实验结果如表2~表4 所示.
基于42个网页-相关网页
目前,特征选择主要采用评估函数法,常用的评估函数有 信息增益( I G, Information Gain) 、互信息量( MI , Mutual In2 formation) 、卡方统计(CHI) ,等等,...
基于2个网页-相关网页
The best influent factors to loadare chosen by information gain.
采用基于信息熵理论的信息增益指标来选择影响负荷预测模型的组合因素以及衡量影响的程度。
参考来源 - 基于粗糙集的网格化电力系统短期负荷预测·2,447,543篇论文数据,部分数据来源于NoteExpress
结果表明,强震前有信息增益减小的特点。
The result shows that the information gain decreases before strong earthquake.
本文提出了一个基于信息增益和卡方检验的属性选择算法。
This paper proposes a new future selection algorithm based on information gain and chi-square test.
该文采用过滤策略,利用候选映射策略和信息增益策略减少待映射概念和待计算属性数量。
This paper adopts a filtering tactic which USES candidate mapping tactic and information gain tactic to reduce the amount of concepts and attribute waiting for computing.
应用推荐