資料介紹
針對異常檢測中異常數(shù)據(jù)與正常數(shù)據(jù)的比例嚴(yán)重不平衡導(dǎo)致決策樹性能下降的問題,提出了C4.5決策樹的三種改進(jìn)方法一C4.5 +δ、均勻分布熵( UDE)和改進(jìn)分布熵函數(shù)(IDEF)。首先,推導(dǎo)了C4.5算法中屬性選擇準(zhǔn)則會傾向于選擇偏斜劃分的屬性;然后,分析了偏斜劃分使得異常(少數(shù)類)檢測精度下降的原因;其次,分別通過引入緩和因子、均勻分布熵或替換分布熵函數(shù)改進(jìn)了C4.5算法的屬性選擇準(zhǔn)則一 信息增益率;最后,利用WEKA平臺和NSL-KDD數(shù)據(jù)集對改進(jìn)的決策樹進(jìn)行驗證。實(shí)驗結(jié)果表明,三種改進(jìn)方法均能提高異常檢測精度。其中,相比于C4.5,C4.5 +7、UDE和IDEF算法在KDDTest-21數(shù)據(jù)集上的少數(shù)類檢測精度(靈敏度)分別提高了3.16、3. 02和3.12個百分點(diǎn),均優(yōu)于采用Renyi熵和Tallis熵作為分裂準(zhǔn)則的方法。此外,利用三種改進(jìn)的決策樹檢測工業(yè)控制系統(tǒng)中的異常,不僅可以提高異常的查全率還能減小誤報率。
異常檢測是指從某個系統(tǒng)的日常數(shù)據(jù)中識別非預(yù)期模式,即異常數(shù)據(jù)。異常通常由惡意行為或違規(guī)操作引發(fā),因此異常檢測技術(shù)廣泛應(yīng)用于網(wǎng)絡(luò)安全、故障檢測等領(lǐng)域。
異常檢測可以視為一-種特殊的分類問題,即分離目標(biāo)數(shù)據(jù)集中的正常數(shù)據(jù)與異常數(shù)據(jù)。因此,絕大多數(shù)基于機(jī)器學(xué)習(xí)的分類方法,如神經(jīng)網(wǎng)絡(luò)、支持向量機(jī)、決策樹等,都可以應(yīng)用于異常檢測。然而異常檢測面臨數(shù)據(jù)不平衡問題,即目標(biāo)數(shù)據(jù)集中異常數(shù)據(jù)與正常數(shù)據(jù)的分布是不平衡的,其中異常數(shù)據(jù)一。般遠(yuǎn)遠(yuǎn)少于正常數(shù)據(jù)。數(shù)據(jù)不平衡問題在醫(yī)療診斷、信用卡詐騙檢測,銀行風(fēng)險管控、系統(tǒng)故障檢測等應(yīng)用中十分常見。在傳統(tǒng)分類問題中,整體準(zhǔn)確度由不同類別的準(zhǔn)確度加權(quán)組成,因此多數(shù)類的準(zhǔn)確度對整體準(zhǔn)確度的影響要遠(yuǎn)大于少數(shù)類。在傳統(tǒng)方法中,分類器會傾向于保證多數(shù)類的準(zhǔn)確度而犧牲少數(shù)類的準(zhǔn)確度,導(dǎo)致少數(shù)類的漏報率較高。然而在很多異常檢測的現(xiàn)實(shí)應(yīng)用中將異常(少數(shù)類)誤判為正常(多數(shù)類)的代價要遠(yuǎn)遠(yuǎn)高于相反的情況,因此需要盡可能地檢測出異常,降低漏報率。例如,在癌癥的診斷中,將癌癥(少數(shù)類)患者誤診為健康(多數(shù)類)的危害要遠(yuǎn)大于將非癌癥患者誤診為癌癥的危害,所以要保證檢測結(jié)果為陽性時盡可能地覆蓋真正的癌癥患者。
- 決策樹引擎解決方案
- 基于遺傳優(yōu)化決策樹的建筑能耗預(yù)測模型 6次下載
- 基于非均衡數(shù)據(jù)分類的猶豫模糊決策樹 5次下載
- 面向二分類不平衡數(shù)據(jù)的XGBoost改進(jìn)方法 4次下載
- 利用采樣安全系數(shù)的多類不平衡過采樣算法 8次下載
- 針對電網(wǎng)不平衡與諧波的鎖相環(huán)改進(jìn)設(shè)計 5次下載
- 基于文化算法的符號網(wǎng)絡(luò)全局不平衡度計算方法 0次下載
- 決策樹的介紹 0次下載
- 基于決策樹學(xué)習(xí)的智能機(jī)器人控制方法 15次下載
- 改進(jìn)決策樹算法的應(yīng)用研究
- 電子稱重儀表決策樹建模研究 24次下載
- 基于決策樹與相異度的離群數(shù)據(jù)挖掘方法
- 基于屬性相似度的決策樹算法
- 一個基于粗集的決策樹規(guī)則提取算法
- 決策樹技術(shù)在汽車銷售中的應(yīng)用
- 決策樹:技術(shù)全解與案例實(shí)戰(zhàn) 954次閱讀
- 使用無功補(bǔ)償裝置調(diào)整不平衡電流的基本原理 1420次閱讀
- 如何判斷三相不平衡? 2470次閱讀
- 機(jī)器學(xué)習(xí)之決策樹生成詳解 1.8w次閱讀
- 如何理解矢量測量中“平衡”與“不平衡 2607次閱讀
- 三相不平衡有哪些處理方法 2.1w次閱讀
- 三相電壓不平衡產(chǎn)生原因_三相電壓不平衡的治理措施 2.4w次閱讀
- 教你如何處理不平衡數(shù)據(jù)集 4717次閱讀
- 決策樹和隨機(jī)森林模型 7868次閱讀
- 什么是決策樹?決策樹算法思考總結(jié) 1.1w次閱讀
- 基于決策樹算法的電能表故障預(yù)測方法 1695次閱讀
- 決策樹的原理和決策樹構(gòu)建的準(zhǔn)備工作,機(jī)器學(xué)習(xí)決策樹的原理 5851次閱讀
- 數(shù)據(jù)挖掘算法:決策樹算法如何學(xué)習(xí)及分裂剪枝 5628次閱讀
- 三相電流不平衡度計算公式_三相電流不平衡度標(biāo)準(zhǔn)及應(yīng)用 7.2w次閱讀
- 機(jī)器學(xué)習(xí):決策樹--python 1553次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費(fèi)下載
- 0.00 MB | 1490次下載 | 免費(fèi)
- 2單片機(jī)典型實(shí)例介紹
- 18.19 MB | 92次下載 | 1 積分
- 3S7-200PLC編程實(shí)例詳細(xì)資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關(guān)電源原理及各功能電路詳解
- 0.38 MB | 10次下載 | 免費(fèi)
- 6基于AT89C2051/4051單片機(jī)編程器的實(shí)驗
- 0.11 MB | 4次下載 | 免費(fèi)
- 7藍(lán)牙設(shè)備在嵌入式領(lǐng)域的廣泛應(yīng)用
- 0.63 MB | 3次下載 | 免費(fèi)
- 89天練會電子電路識圖
- 5.91 MB | 3次下載 | 免費(fèi)
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費(fèi)
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費(fèi)
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費(fèi)
- 5555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33562次下載 | 免費(fèi)
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費(fèi)
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費(fèi)
- 8開關(guān)電源設(shè)計實(shí)例指南
- 未知 | 21539次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費(fèi)
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537791次下載 | 免費(fèi)
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費(fèi)
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 5Altium DXP2002下載入口
- 未知 | 233045次下載 | 免費(fèi)
- 6電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191183次下載 | 免費(fèi)
- 7十天學(xué)會AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183277次下載 | 免費(fèi)
- 8proe5.0野火版下載(中文版免費(fèi)下載)
- 未知 | 138039次下載 | 免費(fèi)
評論
查看更多