基于Flink框架的TopN堆排序優(yōu)化算法
所屬分類:技術(shù)論文
上傳者:zhoubin333
文檔大小:1914 K
標(biāo)簽: 大數(shù)據(jù) TopN Flink
所需積分:0分積分不夠怎么辦,?
文檔介紹:為了解決大數(shù)據(jù)TopN排序問題,,將傳統(tǒng)的堆排序進行優(yōu)化,闡述了優(yōu)化后的HeapOptimize方法的處理過程,。HeapOptimize方法基于Flink框架來完成TopN作業(yè),,可以實時地接收并處理大量的數(shù)據(jù),根據(jù)單位時間需要處理的數(shù)據(jù)數(shù)量來調(diào)整算子的并行度,,增加Flink框架的吞吐量,,提高處理數(shù)據(jù)的速度。通過實驗測量的數(shù)據(jù)結(jié)果佐證了HeapOptimize方法的優(yōu)勢,。
現(xiàn)在下載
VIP會員,,AET專家下載不扣分;重復(fù)下載不扣分,,本人上傳資源不扣分,。