elasticsearch啟動流程


本文基於ES2.3.2來描述。通過結合源碼梳理出ES實例的啟動過程。

elasticsearch的啟動過程是根據配置和環境組裝需要的模塊並啟動的過程。這一過程就是通過guice注入各個功能模塊並啟動這些模塊,從而得到一個功能完整的node。正如之前所說elasticsearch的模塊化特點,它的各個功能都是獨立實現,然后實現通過guice對外提供。首先簡單的說一下guice,它是google的一個輕量級依賴注入框架。它的作者也是依賴注入標准(JSR-330)制定者。雖然它是輕量級框架,但是它的功能及性能卻非常好,這也是elasticsearch選用它作為代碼主要框架的一個主要原因。

 

 

 1.ES實例啟動

org.elasticsearch.Elasticsearch.main
org.elasticsearch.bootstrap
{
    啟動用戶線程keepAliveThread
    導入環境變量和配置參數
    創建pid文件
    檢查(jvm環境,安全、等等)
    nodeBuilder.build()
    node.start();
    keepAliveThread.start();
}

 

2.Node啟動

 

Node()
{
更新setting和environment 構造pluginsService並動態加載plugin @1 加載並初始化modules(PluginsModule
/ClusterModule/RestModule/TransportModule/ActionModule等) 使用guice構造各modules 構造client對象(performing actions/operations against the cluster } Node start() { 構造services和plugins實例。 @2
TransportService啟動 @3 DiscoveryService啟動 @4 HttpServerTransport綁定地址,開始監聽
@5
}

可以看到node的初始化過程主要包括三部分,第一是配置node環境,第二是啟動插件服務(es提供了插件功能來進行擴展功能,這也是它的一個亮點),加載需要的插件,最后就是通過guice加載各個模塊,啟動各個服務。

先說一下插件加載過程。每個node在加載各個模塊前,會首先加載所需要的插件,如果有些插件加載不成功node會啟動失敗。這里會加載三類插件:首先是配置插件,配置到節點配置文件中插件,如分詞插件等;然后查找classpath中能找到的插件,這些插件一般防止在plugin文件夾中;最后是加載site插件,site插件是不涉及java代碼的純網站式插件,如監控插件head,bigdesk等。任何使用者都可以開發自己需要的插件,只要按着elasticsearch相關版本的插件開發規范來實現即可。接下來首先說一下啟動各個模塊的過程。elasticsearch各個功能模塊實現的非常好,解耦非常完美,很多模塊都實現了生命周期接口,只有啟動它才能夠對外提供服務,它的啟動過程也是功能模塊初始化的過程。因此,node節點的啟動過程也就是這些模塊初始化的過程。

 

@1構造pluginsService並動態加載plugin

依次調用各插件的OnModule方法。在OnModule方法內部可以針對多種model來依次操作,比如下面的添加過濾器或者替換TransportService。

為RestModule添加一個過濾器
public void onModule(RestModule module) { module.addRestAction(AuthorityRestFilter.class); }
為actionModels添加自定義過濾器AuthorityActionFilter
public void onModule(final ActionModule module) {
    module.registerFilter(AuthorityActionFilter.class);
}
使用自定義AuthorityTransportService來代替默認的TransportService
public void onModule(final TransportModule module) {
    module.setTransportService(AuthorityTransportService.class, name());
}

 @2 啟動各項服務

for (Class<? extends LifecycleComponent> plugin : pluginsService.nodeServices()) {
     injector.getInstance(plugin).start();// 加載插件中的自定義服務並啟動
}
//通過guice獲取各個模塊的service接口並啟動
injector.getInstance(MappingUpdatedAction.class).setClient(client);
injector.getInstance(IndicesService.class).start();
injector.getInstance(IndexingMemoryController.class).start();
injector.getInstance(IndicesClusterStateService.class).start();
injector.getInstance(IndicesTTLService.class).start();
injector.getInstance(SnapshotsService.class).start();
injector.getInstance(SnapshotShardsService.class).start();
injector.getInstance(RoutingService.class).start();
injector.getInstance(SearchService.class).start();
injector.getInstance(MonitorService.class).start();
injector.getInstance(RestController.class).start();

// TODO hack around circular dependencies problems
injector.getInstance(GatewayAllocator.class).setReallocation(injector.getInstance(ClusterService.class), injector.getInstance(RoutingService.class));

injector.getInstance(ResourceWatcherService.class).start();
injector.getInstance(GatewayService.class).start();
 

 

@3 使用netty實現的 tcp 引擎  public class NettyTransport extends AbstractLifecycleComponent<Transport> implements Transport

       構造客戶端BootStrap,用於和其它節點間的通信。如果是server模式,還要啟動ServerBootstrap用於接收其它客戶端發來的請求

@4 發現功能功能主要用於節點啟動后發現集群,master向所有節點發布集群狀態,選舉master節點並引發集群節點變得事件

 @5 使用netty實現的 http 引擎  public class NettyHttpServerTransport extends AbstractLifecycleComponent<HttpServerTransport> implements HttpServerTransport

 

 3.ES實例退出

shutdownhook觸發
node.close,停止各種服務、插件、腳本、線程池
CountDownLatch減一,keepAliveThread退出
刪除pid文件

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM