-
一種基于MapReduce的分布式索引方法
摘要：海量文本快速索引是云檢索系統(tǒng)的一個難點，而分布式索引程序的開發(fā)難度較大。文中提出了一種基于MapReduce的分布式索引方法，通過在Map函數(shù)中執(zhí)行文檔的解析及索引，以及在Reduce函數(shù)中合并索引數(shù)據(jù)，以減少文檔排序的工作量，提高索引效率。實驗結(jié)果表明，該方法適用于海量數(shù)據(jù)的并行處理。
摘要：海量文本快速索引是云檢索系統(tǒng)的一個難點，而分布式索引程序的開發(fā)難度較大。文中提出了一種基于MapReduce的分布式索引方法，通過在Map函數(shù)中執(zhí)行文檔的解析及索引，以及在Reduce函數(shù)中合并索引數(shù)據(jù)，以減少文檔排序的工作量，提高索引效率。實驗結(jié)果表明，該方法適用于海量數(shù)據(jù)的并行處理。
本站介紹 | 申請友情鏈接 | 歡迎投稿 | 隱私聲明 | 廣告業(yè)務 | 網(wǎng)站地圖 | 聯(lián)系我們 | 誠聘英才
ICP許可證號：京ICP證070360號 21ic電子網(wǎng) 2000- 版權(quán)所有 用戶舉報窗口（ 郵箱：macysun@21ic.com ）
