博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
elasticsearch2.x线程池配置
阅读量:4583 次
发布时间:2019-06-09

本文共 1007 字,大约阅读时间需要 3 分钟。

一个Elasticsearch节点会有多个线程池,但重要的是下面四个:

索引(index):主要是索引数据和删除数据操作(默认是cached类型)

搜索(search):主要是获取,统计和搜索操作(默认是cached类型)

批量操作(bulk):主要是对索引的批量操作(默认是cached类型)

更新(refresh):主要是更新操作(默认是cached类型)

可以通过给设置一个参数来改变线程池的类型(type),例如,把索引的线程池改成blocking类型:

            min: 1   

            size: 30   

            wait_time: 30s  

 

下面是三种可以设置的线程池的类型:

cache

cache线程池是一个无限大小的线程池,如果有很多请求的话都会创建很多线程,下面是个例子:

    threadpool:   

        index:   

            type: cached  

 

fixed

fixed线程池保持固定个数的线程来处理请求队列。

size参数设置线程的个数,默认设置是cpu核心数的5倍

queue_size可以控制待处理请求队列的大小。默认是设置为-1,意味着无限制。当一个请求到来但队列满了的时候,reject_policy参数可以控制它的行为。默认是abort,会使那个请求失败。设置成caller会使该请求在io线程中执行。

    threadpool:   

        index:   

            type: fixed   

            size: 30   

            queue: 1000   

            reject_policy: caller  

 

blocking

blocking线程池允许设置一个最小值(min,默认为1)和线程池大小(size,默认为cpu核心数的5倍)。它也有一个等待队列,队列的大小(queue_size )默认是1000,当这队列满了的时候。它会根据定好的等待时间(wait_time,默认是60秒)来调用io线程,如果超时没有执行就会报错。

    threadpool:   

        index:   

            type: blocking   

            min: 1   

            size: 30   

            wait_time: 30s  

 

笔者在实际工作中,由于程序启动时即产生大量请求,导致队列大小溢出的情况,从而查询请求报错,可以在以下2个解决方法权衡处理:

1、增加队列长度,但随之带来的是CPU消耗高。

2、优化程序,适当控制程序的并发请求量。

转载于:https://www.cnblogs.com/jiu0821/p/6480569.html

你可能感兴趣的文章
C#与MES
查看>>
LR接口测试---Java Vuser之jdbc查询(调试前)
查看>>
SQL Server 各版本安装包分享
查看>>
.net项目移植后的虚拟目录的配置问题
查看>>
JSP页面中引入另一个JSP页面
查看>>
Android笔记——活动的生命周期
查看>>
springmvc使用包装的pojo接收商品信息的查询条件
查看>>
【Linux】【Services】【Configuration】puppet
查看>>
poj 1002:487-3279(水题,提高题 / hash)
查看>>
RAC环境上搭建DG
查看>>
OS X Mountain Lion高手进阶
查看>>
精通CSS:高级Web标准解决方案(第2版)(Amazon第一CSS畅销书全新改版)
查看>>
初识电流环
查看>>
MySQL每天自动增加分区
查看>>
在线生成坐标值,方便布局使用
查看>>
ab测试工具的使用
查看>>
RTL基本知识:编译命令指定隐性线网类型
查看>>
java中BigDecimal在金融行业中的使用
查看>>
66.Plus One
查看>>
爬虫——小结
查看>>