Elasticsearch java API批量處理

來源:互聯網
上載者:User

原文地址:http://blog.csdn.net/u012116196/article/details/51754845


BulkProcessor類提供了一個簡單介面自動沖洗大量操作基於請求的數量或大小,或者在給定的時期。

使用它,首先建立一個 BulkProcessor執行個體: [java]  view plain  copy import org.elasticsearch.action.bulk.BackoffPolicy;   import org.elasticsearch.action.bulk.BulkProcessor;   import org.elasticsearch.common.unit.ByteSizeUnit;   import org.elasticsearch.common.unit.ByteSizeValue;   import org.elasticsearch.common.unit.TimeValue;      BulkProcessor bulkProcessor = BulkProcessor.builder(           client,  //<1>           new BulkProcessor.Listener() {               @Override               public void beforeBulk(long executionId,                                      BulkRequest request) { ... } //<2>                  @Override               public void afterBulk(long executionId,                                     BulkRequest request,                                     BulkResponse response) { ... } //<3>                  @Override               public void afterBulk(long executionId,                                     BulkRequest request,                                     Throwable failure) { ... } //<4>           })           .setBulkActions(10000) //<5>           .setBulkSize(new ByteSizeValue(1, ByteSizeUnit.GB)) //<6>           .setFlushInterval(TimeValue.timeValueSeconds(5)) //<7>           .setConcurrentRequests(1) //<8>           .setBackoffPolicy(               BackoffPolicy.exponentialBackoff(TimeValue.timeValueMillis(100), 3)) //<9>           .build();  

添加您elasticsearch客戶

調用此方法之前執行。例如你可以看到numberOfActions request.numberOfActions()

批量執行後調用此方法。例如你可以檢查是否有一些失敗的請求

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.