Lucene段合并的參數估計

標籤：Lucene   使用   sp   on   log   代碼   ef   size   ie   

使用lucene預設的TieredMergePolicy,索引更新時最大會佔用多少硬碟,要看mergepolicy何時觸發merge。
從代碼中可以看出，只有當eligible.size() >= allowedSegCountInt時才觸發。
eligible是大小不超過閾值的段集合，allowedSegCountInt計算如下,設segsPerTier為a,maxMergeAtOnce為b,bytesLeft(以M為單位)每次減去2b, 2(a^2)(b^2),...(等比數列),allowedSegCountInt就加上a,直到bytesLeft減到0為止 >由此算出:
n <= log(ab,1-bytesLeft(1-ab)/2b)
allowedSegCountInt = ceil(a*log(ab,1-bytesLeft(1-ab)/2b)),
使用預設的設定a=10,b=10,如果bytesLeft=10000(10G),則allowedSegCountInt=24,也就是說只有小段數量超過24時才觸發merge。
保持ab乘積不變，a(segsPerTier)越小越容易觸發合并。

Lucene段合并的參數估計