《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 業界動態 > 基于決策樹的數據挖掘算法應用研究

基于決策樹的數據挖掘算法應用研究

2009-08-04
作者:常秉琨,李 莉

??? 摘 要:決策樹數據挖掘分類算法在金融客戶關系管理(CRM)中的應用為例,進行了數據挖掘的嘗試,從中發現企業產品的銷售規律和客戶群特征,從而提高CRM對市場活動和銷售活動的分析能力,得到了與實際經驗相符的結果和相應的“規則”,驗證了其可行性和可供決策支持的現實意義。
??? 關鍵詞:算法;數據挖掘;決策樹;客戶關系管理

?

??? 決策樹技術是一種對海量數據集進行分類的非常有效方法,通過決策樹的構造模型,從海量信息中挖掘有效的數據,提取有價值的分類規則,從而獲得有用的知識,為決策者提供支持,幫助決策者準確地預測[1]。本文研究了基于決策樹的數據挖掘的相關理論發展及實際應用,尤其是在商業中的應用,研究了決策樹算法在數據挖掘中應用,給出了在金融客戶關系管理中的具體算例。
1 決策樹的分類挖掘技術
1.1 決策樹的分類挖掘算法

??? 分類是數據挖掘中應用最多的任務,要為每個類別做出準確的描述或建立分析模型或挖掘出分類規則,然后用這個分類規則對其他數據庫中的記錄進行分類[2]。在具體分類中,總是希望進行較少的屬性測試,較快地給實例分類,因此在構建決策樹時,樹的高度越小越好。對于N個樣本,它們分成屬于類別Ci( i = 1 ,2 , …, C)的樣本集合,類別Ci中的樣本個
??? 數為Ni,每個樣本有K個屬性,每個屬性有JK個值。決策樹的構造過程如下:
??? (1)計算初始熵(熵用字符S表示):

???

??? (2)選擇一個屬性作為決策樹的根節點:
??? ①對每個屬性Ak( k = 1 ,2 , …,K ) 按照屬性Ak的J個Akj值,把原始樣本分成第1級樣本集。雖然Akj的分支含有nkj個樣本,但它們不一定屬于單一的類別;
??? ②對于每個分支的nkj個樣本,屬于類別Ci的樣本數目是nkj(i),用下式可以求出該分支的熵:

???

??? ③計算由測試屬性引起的熵降低,即
??? ④選擇產生最大熵降低的屬性AK0,即AK0滿足:
???
??? ⑤屬性AK0便是決策樹的根。
??? (3)由屬性將產生JK0個葉節點,并將樣本集分成JK0個子集,對每個葉節點上的樣本子集依次利用上面的方法選擇一個屬性Ay作為決策樹的下一級,使在該葉節點能得到最大的熵降低。
??? (4)按照步驟(3)不斷構造決策樹的下一級直至所有的樣本子集只有一個類別,這時表明系統的熵為零,決策樹構造過程完畢。
1. 2 決策樹分類挖掘系統的建立
??? 在對金融客戶進行分類分析的過程中,決策樹分類數據挖掘系統建立和應用的一個典型過程是:(1)根據客戶分類的標準,執行客戶分類算法,并將運行結果存儲于數據倉庫中,這樣,每個現有的客戶都具有一個確定的客戶類別;(2)根據歷史數據,主要是客戶的背景數據和客戶的分類數據,執行決策樹生成算法,針對每一種客戶類別,生成一棵決策樹,以一定的形式存放于數據倉庫中;(3)在以上過程執行完畢后,當一個新的客戶來辦理業務時,客戶經理可以首先在系統中調用決策樹展示模塊,系統將整個決策樹展示出來,然后系統根據客戶的具體背景情況預測客戶所屬的客戶類別,以及屬于該客戶類別的概率,并將這些情況展現給客戶經理,客戶經理根據這些情況,對該客戶采取相應的營銷策略,從而達到較好的效果。
2 基于決策樹的數據挖掘的案例分析
2.1 公司客戶關系數據庫

??? 利用決策樹實現客戶細分,主要是在基于客戶價值的客戶細分方法之上進行的,目的是通過了解客戶的特征性指標和行為性指標與客戶所在客戶類別的關系,可以了解同一價值客戶的差異性,有針對性地對不同客戶制定相應的銷售策略[3]。下面以河南省某金融企業的客戶關系管理(CRM)為例,該公司CRM數據如表1所示,說明基于決策樹的客戶分類數據挖掘技術在金融企業客戶關系管理中的應用,來具體闡述如何運用改進ID3算法進行數據挖掘。由于是以分析客戶的特征性指標為例的,所以從中選取了代表特征性的3個屬性:客戶年齡段、學歷以及職業。

?


2.2基于ID3的細分步驟
??? 對于N個樣本,它們分成屬于類別Ci( i = 1 ,2 , …, C )的樣本集合,類別Ci中的樣本個數為Ni,每個樣本有K個屬性,每個屬性有JK個值。類別是客戶類別,分為Ⅰ類客戶、Ⅱ類客戶、Ⅲ類客戶和Ⅳ類客戶4類。將具體的客戶年齡概化為≤25 、25~50 和≥50 3個年齡段,按學歷分為初等學歷、中等學歷和高等學歷3類。按職業分為商業人員、企業人員和其他人員3類。分別如表2、表3、表4所示。
???

?????
??? 決策樹的構造過程如下:
??? (1)計算初始熵(熵用字符S表示) :
????
??? (2) 選擇一個屬性作為決策樹的根節點:
??? ①對每個屬性Ak( k = 1 ,2 , …, K ) 按照屬性Ak的J個Akj值,把原始樣本分成第1級樣本集。雖然Akj的分支含有nkj個樣本,但它們不一定屬于單一的類別。
??? ②對于每個分支的nkj個樣本,屬于類別Ci的樣本數目是nkj(i),用下式可以求出該分支的熵:
???

??? ③計算由測試屬性引起的熵降低,即

???
??? 根據以上計算結果,得出最大熵降低的屬性是K3,即職業。
??? ⑤屬性職業便是決策樹的根。
??? (3) 由屬性將產生JK0個葉節點,并將樣本集分成個子集,對每個葉節點上的樣本子集依次利用上面的方法選擇一個屬性Ay作為決策樹的下一級,使在該葉節點能得到最大的熵降低。
??? (4) 按照步驟(3)不斷構造決策樹的下一級直至所有的樣本子集只有一個類別,這時表明系統的熵為零,決策樹構造過程完畢。然后根據上述的決策樹構造過程,得到圖1所示的決策樹。

?


2.3具體應用分析
??? 決策樹算法中屬性的取值,進一步細分所依據的是特征性指標和行為性指標,然后可以分別得出各種特征性指標和行為性指標與4類客戶之間的樹狀分類結構。下面以分析特征性指標為例,來說明決策樹的構建。
??? 決策樹構建之前,必須要找出決策樹的主屬性。決策樹主屬性的確定主要是根據具體的情況而定。所以客戶細分的主屬性應該是“客戶類別”,就是基于客戶價值的客戶細分得出的客戶類別。
??? 對于數據的選取,并不是所有的數據都符合要求,決策樹建立所要求的數據應是沒有噪音數據和缺失數據,這就需要對數據進行匯總處理。匯總處理一方面是將企業不同部門和不同分銷機構的數據進行集成;另一方面是將數據進行概化處理,即將低層次的原始數據替換為高層次的概念,以便于進行數據挖掘。
??? 分析圖1,從中可以明確4類客戶的特征屬性的大致排布情況,根據所了解的情況,能夠很方便地從客戶的這些特征中大概了解其在4 類客戶中所處的位置。用IF - THEN 的格式來表示樹狀圖的信息(以第Ⅲ類客戶為例),例如:
??? IF 職業=“商業員工”AND 年齡> 25 AND 年齡
??? < 50 AND 學歷=“初等教育”THEN 屬于Ⅲ類客戶
??? IF 職業=“企業員工”AND 年齡> 25 AND 年齡
??? < 50 AND學歷=“初等教育”OR 學歷=“中等教育”THEN 屬于Ⅲ類客戶
??? IF 職業=“其他員工”AND 年齡> 25 AND 學歷
??? ≠“高等教育”THEN 屬于Ⅲ類客戶???????????????????
??? 這些式子說明:對于“商業員工”的客戶來說,如果年齡在25~50 歲之間,學歷為“初等教育”,屬于Ⅲ類客戶;對于“企業員工”的客戶來說,如果年齡在25~50 歲之間,學歷為“中等教育”或者“高等教育”,屬于Ⅲ類客戶;對于“其他員工”的客戶來說,如果年齡大于25 歲,只要學歷不是“高等教育”,就屬于Ⅲ類客戶。
??? 根據上面分析第Ⅲ類客戶的結果,可以得出:不論客戶職業是什么,只要年齡在25~50 歲之間,學歷為“初等教育”的客戶,都屬于Ⅲ類客戶。由于Ⅲ類客戶是企業目前利潤的重要來源,所以企業就要吸引和保持住與Ⅲ類客戶之間的客戶關系,需要把營銷策略更傾向于年齡在25~50歲之間的客戶,而對于在該區間之外的客戶,需要有選擇性地開展促銷方式,例如對其他職業的客戶,就要考慮大于50歲的情況。由于Ⅰ類客戶對企業的貢獻很小,分析的必要性不大,所以重點是對Ⅱ、Ⅲ和Ⅳ類客戶的分析。通過這種分析方式,逐步把通過ID3得出的樹狀結構的所有分支都進行分析,可以了解企業的同一價值客戶在特征屬性上的差異性。同理再對客戶的行為性指標進行分析,可以得出同一價值客戶在行為屬性上的差異性。結合這兩方面,就能夠在了解客戶價值類別的基礎上,有針對性地對不同客戶制定相應的銷售策略,減少企業不必要的開銷,實現對客戶價值細分后的進一步細分。
??? 如何高效地整合和分析企業各部門和各級分銷機構內的銷售和客戶信息,使企業能夠從全局的角度了解和認識市場是CRM的重要任務之一,而基于決策樹的數據挖掘算法對于企業來說剛好可以實現這個任務。通過基于決策樹的客戶分類數據挖掘技術,可以了解客戶的特征性指標和行為性指標與客戶所在客戶類別的關系[4],使企業能夠在了解何種資源組合可以使得自己獲得高利潤的同時,有針對性地根據客戶的差異化和多變性需求制定相應的銷售策略,使得企業制定的營銷策略更加符合市場的需求,保持在市場中的競爭地位。
參考文獻
[1]? 張世海,劉曉燕,涂慶,等.基于決策樹的高層結構智能選型知識發現[J] .哈爾濱工業大學學報, 2005,37(4):451-454.
[2]?崔立新,苑森森,趙春喜.約束性相聯規則發現方法及算法[J].計算機學報,2000,22(2):216-220.
[3]?李緒成,王保保.挖掘關聯規則中Apriori算法的一種改進[J].計算機工程與應用,2002,28(7):104-105.
[4]?魏定國,彭宏.基于知識網絡的數據挖掘[J].計算機科學,2006,33(6):210-213.

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
热re99久久精品国产66热_欧美小视频在线观看_日韩成人激情影院_庆余年2免费日韩剧观看大牛_91久久久久久国产精品_国产原创欧美精品_美女999久久久精品视频_欧美大成色www永久网站婷_国产色婷婷国产综合在线理论片a_国产精品电影在线观看_日韩精品视频在线观看网址_97在线观看免费_性欧美亚洲xxxx乳在线观看_久久精品美女视频网站_777国产偷窥盗摄精品视频_在线日韩第一页
  • <strike id="ygamy"></strike>
  • 
    
      • <del id="ygamy"></del>
        <tfoot id="ygamy"></tfoot>
          <strike id="ygamy"></strike>
          国产精品高精视频免费| 亚洲精品国产系列| 午夜一区二区三区在线观看| 欧美激情精品久久久| 欧美理论片在线观看| 夜夜精品视频一区二区| 激情六月婷婷综合| 国产一区二区三区四区hd| 亚洲精品在线电影| 国产精品久久久一区二区| 欧美日韩三区四区| 久久综合电影| 亚洲欧美久久久| 国产在线国偷精品产拍免费yy| 在线精品亚洲一区二区| 久久久久久**毛片大全| 亚洲伊人伊色伊影伊综合网| 欧美福利一区二区| 久久精品成人一区二区三区蜜臀| 亚洲日本免费电影| 国产精品嫩草影院一区二区| 国产精品国产三级国产普通话99| 欧美夫妇交换俱乐部在线观看| 亚洲日本中文字幕免费在线不卡| 亚洲精品欧美一区二区三区| 狠狠色丁香婷婷综合影院| 国产精品久久久久三级| 亚洲欧美综合v| 久久久国产精品一区| 久久成人18免费网站| 国产裸体写真av一区二区| 亚洲少妇一区| 欧美日韩亚洲另类| 国产日韩精品入口| 国产精品成人一区二区| 亚洲黄色成人网| 国产欧美一区二区精品性| 国产精品午夜在线| 亚洲人成绝费网站色www| 亚洲人成网在线播放| 亚洲欧洲日产国码二区| 狠狠色噜噜狠狠色综合久| 一区二区三区国产在线| 欧美成人第一页| 国产精品久久久久久久9999| 精品盗摄一区二区三区| 欧美一区二区啪啪| 牛夜精品久久久久久久99黑人| 欧美日韩免费一区| 亚洲一区二区高清视频| 亚洲欧洲另类| 久久综合狠狠综合久久综青草| 亚洲风情亚aⅴ在线发布| 国产一区二区三区奇米久涩| 亚洲茄子视频| 黑人巨大精品欧美一区二区小视频| 国产自产在线视频一区| 亚洲网站在线观看| 久久久久综合一区二区三区| 欧美日韩在线视频一区| 久久九九99视频| 国产噜噜噜噜噜久久久久久久久| 亚洲黄色小视频| 亚洲国产成人porn| 欧美精品免费播放| 亚洲精品免费网站| 国产精品亚洲精品| 国产视频一区二区在线观看| 欧美在线观看视频一区二区| 一区二区欧美亚洲| 欧美国产亚洲精品久久久8v| 欧美日韩亚洲不卡| 久久久久久久久综合| 欧美在线亚洲| 国产真实久久| 在线视频精品| 一本色道久久88精品综合| 亚洲婷婷免费| 欧美日本精品一区二区三区| 欧美一区二区三区视频在线| 亚洲五月婷婷| 亚洲欧洲一区二区三区久久| 精品不卡一区二区三区| 国产精品激情偷乱一区二区∴| 今天的高清视频免费播放成人| 免费国产一区二区| 国产一区二区三区久久久久久久久| 欧美日韩1区| 亚洲精品中文字幕女同| 国产视频一区免费看| 亚洲视频在线二区| 欧美午夜片在线免费观看| 欧美噜噜久久久xxx| 国产日韩精品久久久| 鲁大师成人一区二区三区| 欧美成人日本| 欧美在线视频观看免费网站| 韩日精品在线| 欧美激情一区二区三区在线视频观看| 欧美三级日韩三级国产三级| 久久亚洲电影| 国产婷婷色一区二区三区在线| 久久国产精品久久久久久久久久| 国产在线视频不卡二| 欧美日韩在线三区| 国产精品老女人精品视频| 狠狠色狠狠色综合日日91app| 亚洲观看高清完整版在线观看| 亚洲无线一线二线三线区别av| 激情伊人五月天久久综合| 欧美激情久久久久久| 欧美影院成年免费版| 久久久美女艺术照精彩视频福利播放| 久久嫩草精品久久久精品| 亚洲视频导航| 在线免费不卡视频| 午夜精品在线看| 国产精品久久久久久久9999| 可以免费看不卡的av网站| 亚洲一区精品电影| 日韩一级精品| 在线成人激情黄色| 亚洲国产乱码最新视频| 欧美中在线观看| 久久爱另类一区二区小说| 国产精品色婷婷久久58| 一区二区不卡在线视频 午夜欧美不卡'| 久久黄色级2电影| 国产人妖伪娘一区91| 久久亚洲一区二区三区四区| 欧美日韩国产综合网| 欧美精品videossex性护士| 国产精品亚洲欧美| 免费亚洲电影在线观看| 91久久精品日日躁夜夜躁国产| 亚洲国产日本| 国产精品视频精品视频| 国产日韩欧美在线播放不卡| 欧美精品日韩www.p站| 欧美日韩在线播放一区二区| 欧美无乱码久久久免费午夜一区| 久久久蜜臀国产一区二区| 亚洲一二三四区| 欧美午夜电影在线| 国内精品久久久久久| 欧美成人免费网站| 国产精品视频久久| 欧美激情第二页| 国内揄拍国内精品久久| 久久久久久一区二区三区| 国产真实乱偷精品视频免| 亚洲裸体视频| 裸体歌舞表演一区二区| 老司机精品导航| 久久丁香综合五月国产三级网站| 欧美一区=区| 亚洲专区一二三| 亚洲网站在线看| 久热综合在线亚洲精品| 国产精品分类| 日韩亚洲国产精品| 国产精品美女黄网| 日韩天堂在线观看| 99国产精品久久久| 国产一区二区成人久久免费影院| 免费91麻豆精品国产自产在线观看| 国产三级精品在线不卡| 亚洲第一在线综合网站| 黄色成人91| 在线观看亚洲精品视频| 国产专区综合网| 日韩亚洲国产欧美| 亚洲神马久久| 国产精品久99| 一区二区三区蜜桃网| 欧美影片第一页| 欧美成人一区二区| 亚洲一区不卡| 亚洲美女尤物影院| 亚洲欧美区自拍先锋| 国产精品欧美日韩久久| 性欧美激情精品| 久久久久久久久久久一区| 亚洲国产一区二区a毛片| 欧美亚洲尤物久久| 欧美不卡一区| 激情久久久久| 国产精品一区免费在线观看| 伊人成人网在线看| 你懂的视频一区二区| 1000部国产精品成人观看| 亚洲一区二区欧美日韩| 欧美国内亚洲| 欧美在线观看日本一区| 欧美日韩一区视频| 欧美成人精品三级在线观看| 欧美激情中文字幕一区二区| 欧美日韩免费观看一区三区| 国产精品久久国产精麻豆99网站| 亚洲主播在线| 久久综合国产精品| 久久国产精品99久久久久久老狼| 欧美88av| 一本久久综合亚洲鲁鲁五月天| 国产午夜精品理论片a级探花| 欧美亚洲视频在线观看| 亚洲电影毛片| 久久亚洲午夜电影| 在线看欧美日韩| 亚洲午夜伦理| 欧美好骚综合网| 久久精品中文字幕一区二区三区| 欧美在线黄色| 亚洲国产精选| 香蕉免费一区二区三区在线观看| 国产精品videossex久久发布| 亚洲午夜黄色| 亚洲欧美精品在线观看| 国产精品一区二区三区观看| 午夜老司机精品| 一本久久知道综合久久| 黄色在线成人| 国产日韩一区二区| 免费人成精品欧美精品| 亚洲一区999| 欧美日韩中文另类| 久久福利毛片| 国模精品一区二区三区色天香| 国产精品日韩一区| 日韩写真视频在线观看| 99精品欧美一区二区蜜桃免费| 欧美一区二区三区免费在线看| 国产精品igao视频网网址不卡日韩| 欧美+亚洲+精品+三区| 在线一区二区视频| 亚洲美女性视频| 久热re这里精品视频在线6| 国产午夜亚洲精品理论片色戒| 欧美激情欧美激情在线五月| 久久久久久国产精品mv| 欧美日韩久久| 精品不卡一区二区三区| 欧美日韩综合另类| 久久精品国产96久久久香蕉| 亚洲男人天堂2024| 黄色另类av| 销魂美女一区二区三区视频在线| 欧美一区二区三区免费观看视频| 亚洲伊人一本大道中文字幕| 久久久久综合一区二区三区| 亚洲午夜精品一区二区三区他趣| 国产精品视频久久| 亚洲国产老妈| 在线亚洲欧美| 亚洲桃色在线一区| 一区二区三区在线不卡| 欧美有码在线观看视频| 亚洲精品亚洲人成人网| 欧美久久电影| 亚洲永久免费观看| 午夜精品久久久久久久蜜桃app| 亚洲美洲欧洲综合国产一区| 国产综合色一区二区三区| 欧美视频在线观看免费网址| 久久字幕精品一区| 野花国产精品入口| 国产精品美女久久久| 欧美精品一级| 国产精品久久久久久久7电影| 久久久久国产一区二区| 久久久夜夜夜| 一区二区三区在线免费播放| 在线观看国产日韩| 欧美日韩福利在线观看| 亚洲欧洲在线视频| 麻豆乱码国产一区二区三区| 欧美视频在线观看一区| 久久亚洲高清| 国产精品日韩一区二区| 欧美日韩欧美一区二区| 日韩天堂av| 国产精品久久国产精品99gif| 蜜桃av久久久亚洲精品| 欧美日韩精品二区| 久久一区激情| 国产一区二区三区日韩| 欧美国产精品v| 亚洲国产女人aaa毛片在线| 欧美日韩免费视频| 欧美黄在线观看| 中国亚洲黄色| 久久精品人人做人人爽电影蜜月| 久久国产精品久久w女人spa| 亚洲视频一区在线| 国产偷自视频区视频一区二区| 午夜精品一区二区三区电影天堂| 亚洲福利专区| 国产一区二区剧情av在线| 欧美日韩国产丝袜另类| 亚洲视频网在线直播| 久久综合狠狠综合久久综青草| 在线视频欧美精品| 激情丁香综合| 欧美日韩一级片在线观看| 国产香蕉97碰碰久久人人| 激情欧美一区| 羞羞漫画18久久大片| 国内成人精品2018免费看| 国产片一区二区| 亚洲国产精品美女| 午夜精彩视频在线观看不卡| 国产精品永久在线| 国产精品vip| 国产亚洲一区在线播放| 国产精品久久久久久久久久三级| 伊人蜜桃色噜噜激情综合| 亚洲婷婷国产精品电影人久久| 亚洲激情成人网| 欧美日韩精品在线观看| aaa亚洲精品一二三区| 亚洲欧美一区二区三区极速播放| 亚洲电影免费在线| 国产精品一二| 老司机精品视频网站| 亚洲国产精品免费| 亚洲黄色片网站| 狠狠色丁香久久婷婷综合丁香| 亚洲激精日韩激精欧美精品|