情况网易视频云技术干货：分布式搜索elasticsearch集群监控工具bigdesk.docx

网易视频云技术干货分布式搜索elasticsearch集群监控工具bigdesk

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术为客户提供稳定流畅、低时延、高并发的视频肯播、录制、存储、转码及点播等音视频的PASS服务。在线教育、远程医疗、娱乐秀场、在线金融等各行业及金业用户只需经过简单的开发即可打造在线音视频平台。现在网易视频云与大家分享一下分布式搜索elasticsearch集群监控工具bigdesk。bigdesk是elasticsearch的一个集群监控工具町以通过它來查看es集群的各种状态如cpu、内存使用情况索引数据、搜索情况http连接数等。今天网易视频云就给人家分享关于分布式搜索elasticsearch集群监控工具bigdesk的技术干货

插件安装运行

1.bin/plugin-install 1 ukas-vlcek/bigdesk

2.坯仃es

3.打开(localhost:9200/_plugin/bigdesk/)当然也可以直接下载源码运行inclox.html

Iptimr:625hnurx33 And441 rnfl liwcond'avd wrstotr L6X>. 17

同样是输入ip地址和端口后连接界面如下。加星的表示主节点。

JV

下面介绍下各个图表。

系统监控

jvm

显示jvm的一些状态左起分别为 jvmheap内存使用情况, 蓝色的为已使用内存;非heap使用内存;线程数 gc情况次数和时间 ;

VMotme: IMI HotSpoMTM)MSenrerVMVM Uptlmr. hourvM nunutrvVseconoi mdIB)vvtAi%econ<>iwencton j Mlcroiysterm inc VMwnkm: 19d M2

进程:

卜顶四张图主要显示es的进程对系统资源的使用情况左起分别为进程打开文件数,内存使用情况 epu吋间和进程的epu使用率

Process

这里包含系统方面的一些状态左起分别为CPU,内存交换区和平均负载的情况ps

CPU kttol

CPUniodrt;XronQ4O1MHj)CPU MeWesl i intcwM IOOOHV*tOCAl lOQlrA lb

CHU uKfirimrtS8r4SZXi lAt 9 r 9 8 149  1>U■订 i)0 <9 Xtl6«U

内存使用情况中的

Total virtual指linux下虚拟内存,它包括virtual memory map中的所有数据量之和。包括程序类+程序数据+j ar包空间+j re占用空间等。resident memory指程序实际占用的物理内存。

通讯

这里可以查看tcp和http链接的一些数据。

HTTP:  Rx niL/gU•14%$S0^n

HTTPtottopenrct67510722 TKlS793ob. *1452031852

HTTP&Transport

索引:

这里町以查看索引数据和搜索的一些時况。

左I起每秒索引请求搜索时间, 每秒取数据请求取数据时间。

左下起缓存大小缓存失效个数, 每秒索引请求索引时间。

Indices

Hutfi W9S. )96m We.J94gb

Refretft30S09.30.3m HRm cached

G«t rtquMti per Mcond(A) Gettime p«f MCOM(A)

Query571190950 Query47Jd Get3M2 Get29.4%

Fetth: 1V064S92 FetmiSd (JMC»92 (JMC294<

MukwO Missing0>

Cache mncbons(A) IndtKing requestsp<f Meond S) Indexing time perwamd⑹

l iter l imbFMi l iter:0 Detrtel8134S2 OlctrJ.4meOOlmb HettO M0C19OOMSO IndexZ3h

SMTC)

显示硬盘的读写情况

O Get

O■•m

I l •• tt>«aiMi i ior | |.M Hi»4 tBMlltVTItM

Cache toe

File system

Reads:U7G557 React 9・4gb