决策树分类算法研究

合集下载

相关主题

1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。

ቤተ መጻሕፍቲ ባይዱ
中分号Ｔ３．圈类：Ｐ０６１
决策树分类算法研究
张琳，陈燕，李挑迎，牟向伟
（大连海事大学交通运输管理学院，辽宁大连１６２）０６１
摘
要：Ｉ３算法在选择分裂属性时偏向于选取属性取值较多的属性。针对该问题，引入属性重要性和属性取值数量２Ｄ个参数对Ｉ３算法Ｄ
的信息增益公式进行改进，而提高取值数量少但较为关键的属性的重要性，使算法更好地反映实际决策情况，并根据凸函数的性质简化从信息熵的计算，提高决策树的构造效率。通过实例介绍改进算法的具体应用方法，证明其性能相比原算法有所提高。
关健词：１３Ｄ算法；信息增益；属性重要性；属性取值数量；信息熵
ＲｅｔｎＤｅｓ￣ ’ ｅａｓｆＣｉｎＡＩｏｉｈＲ，ｅｒｈ０ｅｉｉ｝ｒｅＣｌｓｉｃｔｏＲｒｔｍｓｓａｃｏＤｃｏｎｌＣＩｔｉａｉ
ＺＨＡＮＧｎＣＨＥＮｎ，ａ — ｉｇＭＵａ－ｉＬｉ，ＹａＬＩＴｏｙｎ，Ｘｉｎｇｗｅ（ｏｌｇｆｒｎｐｒｔｎＭａａｅｎ，ｌｎＭａｉｍｅＵｉｅｓｙＤａａ１０６ＣｉａＣｌｅａｓｏｔｉｎｇｍｅｔＤａｉｒｉｎｖｒｉ，ｌｎ１６２，ｈｎ）ｅｏＴａｏａｔｔｉ
ＤＯｈ１．９９．ｓ．０ —４８２１．３０００３６／ｉｎ１０３２．０１１．２ｊｓ０
ｌ概述
］ｙｗｒｓＤ３ａｇｒｈｉｆｒａｉｎｇｉ；ｔｂｔｉｏｔｎｅｎｍｂｒｆｔｉｕｅｖｌｅ；ｆｒｔｎｅｔｏｙＫｅｏｄ］Ｉｌｏｔｍ；ｎｏｔａｎａｔｕｅｍｐｒｃ；ｕｅｔｂｔａｓｉｏｍａｉｎｒｐｉｍｏｉｒａｏａｒｕｎｏ
［ｂｔｃ］Ｉ３ｌｏｔｍｔｄｔｃｏｓｔｅｔｉｔｆｏｌｓｓｈｌｔｇａｒｕｓＡｍｉｅｒｂｍ，ｉｐｐｒｎｏｕｅｔｏＡｓａｔＤｇｒｈｎｓｏｈｏｅｈｔｂｅｏｒｖｕｅｐｉｎｔｂｔ．ｉｎａｔｏｌｔｓａｅｉｒｄｃｓｗｒａｉｅａｒｕｓｍｅａｅａｔｓｔｉｔｉｅｇｔｈｐｅｈｔ
ｐｒｍｅｅｓｉｃｕｉｇａｔｉｕｅｉａａｔｒｎｌｄｎｔｂｔｍｐｏｔｎｅａｄｎｒｒａｃｎｕｍｂｒｏｔｉｕｅｖｌｅＯｉｒｖｅｅｉｔｄｆｒｕａｏｎｏａｉｎｇｉｆＩｌｏｉｍ．ｉｅｆａｔｂｔａｕｓｔｍｐｏｅｔｘｓｅｏｍｌｆｉｆｒｔａｎｏｒｈｍｏＤ３ａｇｒｔｈＴｈｓｃｎｒｂｔｓｏｎａｃｎｔｅｍｐｒａｃｏｔｅｒｔｃｌｔｒｂｔｓｏｔｉｕｅｔｅｈｎｉｇｈｉｏｔｎｅｆｈｃｉａａｔｕｅｗｉｆｗｅｖｌｅａｄｉｉｈｔｅｒａｕｓｎｍａｉｇｈｅｌｏｉｈｋｎｔａｇｒｔｍｂｔｒｅｌｃｔｅｃｕｌｅｔｒｆｅｔｈａｔａｅｄｅｉｉｎｍａｉｇｓｔａｉｎ．ｃｒｉｇｔｅｐｏｅｔｓｏｅｃｎｅｕｃｉｎ，ｔｉｌｆｅｅｃｌｕａｉｇｆｒｌｆｎｏｍａｉｎｅｔｏｙｔｍｐｏｖｃｓｏ — ｋｎｉｔｕｏＡｃｏｄｎｔｒｐｒｉｆｔｏｖｘｆｎｔｏｈｅｈｏｉｍｐｉｓｔａｃｌｔｏｍｕａｏｆｒｔｏｎｒｐｏｉｒｅｓｉｈｎｉｔｅｅｉｉｎｙｏｏｎｔｕｔｇａｄｃｓｏｒｅＡｏｃｅｅｅａｌｓｇｖｎｔｅｃｉｅｔｅｓｅｉｃａｐｉａｉｎｏｈｆｃｅｃｆｃｓｒｃｉｅｉｉｎｔ．ｃｎｒｔｘｍｐｅｉｉｅｄｓｒｂｐｃｆｐｌｔｏｆｉｎｅｏｈｉｃｍｐｒｖｄａｇｒｔｍ，ｎｅｒｓｌｏｅｌｏｉｈａｄｔｅｕｔｈｓｏｈｔｉｉｏｅｅｃｅｔｈａｅｏｇｎｌｌｏｉｈｈｗｓｔａｔｓｍｒｆｉｎｎｔｒｉａｇｒｔｍ．ｉｔｈｉａ
第３７卷第１期３
、０．７，１３
・
计
算
机
工
程
２１年７月０１
Ｊｙ０１ｕｌ２ｌ
ＮＯ１．３
ＣｏｍｐｔｒＥｎｇｎｅｉｇｕｅｉｅｒｎ
软件技术与数据库・
文编ｌ３８０） — ０ — ２文标码：章号；０＿４（１１＿６－ｏ２２１３０６０献识Ａ