精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

您好,歡迎來電子發燒友網! ,新用戶?[免費注冊]

您的位置:電子發燒友網>源碼下載>數值算法/人工智能>

輿情去重算法的研究

大?。?/span>0.69 MB 人氣: 2017-11-03 需要積分:0

  近年來,輿情信息在大數據服務中廣泛被加工使用,但轉載、復制等操作使得采集的輿情信息重復量龐大,給后期的加工帶來困難。在這種情況下,針對輿情數據開展去重研究的卻相對較少。文中針對輿情去重不可避免但缺乏理論指導的問題,通過研究SimHash、MinHash、Jaccard等經典去重算法,結合TF、TF-IDF、特征碼等不同特征選擇和3 000輿情樣本進行實驗,最終發現MinHash+特征碼運行時間最短;Jaccard的漏判數最少,召回率可達90%以上;MinHash算法的誤判數最少,去重精度可達100%,并且MinHash通過閾值的調整能夠獲得Jaccard同樣的召回率。

輿情去重算法的研究

非常好我支持^.^

(0) 0%

不好我反對

(0) 0%

      發表評論

      用戶評論
      評價:好評中評差評

      發表評論,獲取積分! 請遵守相關規定!

      ?