聊聊python elasticsearch聚合计算的用法

elasticsearch,python 9,456 views
今朋友问我关于python elasticsearch aggs的问题,虽然我自己也经常使用es,但因为业务的关系,能用到的elasticsearch语句来来回回就那些,然后再来回套用那几个DSL局域就可以了…  趁着这次跟别人交流的机会,我也把elasticsearch aggs聚合计算也好好的...
阅读全文 0

聊聊python elasticsearch聚合计算的用法

11-01 9,456 views

今朋友问我关于python elasticsearch aggs的问题,虽然我自己也经常使用es,但因为业务的关系,能用到的elasticsearch语句来来回回就那些,然后再来回套用...
阅读全文 0

从源码分析python批量插入elasticsearch的实现

elasticsearch,python 8,655 views
看了elasticsearch python的一些源码,现在看到bulk批量操作.  发现网上对于elasticsearch批量插入的文章有些少,我在这里就简单描述下es bulk的各个接口。  最近爬虫太粗暴了,文章总是被转走. 这里标注下原文链接 http://xiaorui.cc/?p=2...
阅读全文 0

从源码分析python批量插入elasticsearch的实现

10-30 8,655 views

看了elasticsearch python的一些源码,现在看到bulk批量操作.  发现网上对于elasticsearch批量插入的文章有些少,我在这里就简单描述下es bulk的各个...
阅读全文 0

使用tornado实现elasticsearch的权限控制

elasticsearch,python 9,467 views
前言:     公司的应用监控平台又要有所变动了,准备把opentsdb给剔除,改用elasticsearch后端存储。去掉opentsdb的原因很简单,因为在数据量大的时候,hbase rowkey的效率达不到快速返回的需求,尤其针对聚合计算效率低。Opentsdb不支持二级索引...
阅读全文 1

使用tornado实现elasticsearch的权限控制

10-19 9,467 views

前言:     公司的应用监控平台又要有所变动了,准备把opentsdb给剔除,改用elasticsearch后端存储。去掉opentsdb的原因很简单,因为在数...
阅读全文 1

python elasticsearch高级组合查询及aggs聚合

elasticsearch,python 10,027 views
这两天和小朋友对elasticsearch进行死逼…  主要是纠结,我今天就上两个例子……   如果你的查询较为复杂就直接套用这个格式,shold里面的逻辑都是OR , must_not是非,must是必须要有的。  关于elasticsearch 组合查询和...
阅读全文 1

python elasticsearch高级组合查询及aggs聚合

09-18 10,027 views

这两天和小朋友对elasticsearch进行死逼…  主要是纠结,我今天就上两个例子……   如果你的查询较为复杂就直接套用这个...
阅读全文 1

通过elasticsearch批量创建kibana的visualize图表及dashboard

elasticsearch,运维,运维开发 14,766 views
      最近系统因为几处连锁的bug造成数据的缺失,有个几百万条有效数据吧。 这边基于metric的报警还完善,自己写得关于量级判断还没上线,SO,在这样监控不给力的情况下,就需要产品经理自己去统计下。 文章写的不是很严谨,欢迎来喷,另...
阅读全文 8

通过elasticsearch批量创建kibana的visualize图表及dashboard

06-09 14,766 views

      最近系统因为几处连锁的bug造成数据的缺失,有个几百万条有效数据吧。 这边基于metric的报警还完善,自己写得关于量级判断还没...
阅读全文 8

elk调优之修改logstash写入elasticsearch按照时间分库

elasticsearch,运维开发 9,532 views
logstash index服务端又自己挂了,很让人发蒙…. 原因还没找到. 说下现在的问题…. 原本的logstash是按照每天一个库,这样在es集群环境下会做太多的sharding。   所以改成按照月切割,每月一个。 该文章写的有些乱,欢迎来喷 ! 另外...
阅读全文 0

elk调优之修改logstash写入elasticsearch按照时间分库

03-23 9,532 views

logstash index服务端又自己挂了,很让人发蒙…. 原因还没找到. 说下现在的问题…. 原本的logstash是按照每天一个库,这样在es集群环境下...
阅读全文 0