我在测试elk的时候发现一个问题,那就是发现IO一直都在wait,一直很高。本来我以为是腾讯的蓝鲸智云导致的,后来不用蓝鲸智云,用自己搭建的es6 去搭建elk的时候发现。wait 一直很高。发现其中一台的io负载正常,后面发现文件格式有所不同。正常的那台文件格式是ext4,其他出问题的都是xfs
[……]阅读全文
我在测试elk的时候发现一个问题,那就是发现IO一直都在wait,一直很高。本来我以为是腾讯的蓝鲸智云导致的,后来不用蓝鲸智云,用自己搭建的es6 去搭建elk的时候发现。wait 一直很高。发现其中一台的io负载正常,后面发现文件格式有所不同。正常的那台文件格式是ext4,其他出问题的都是xfs
[……]阅读全文
最近研究elasticsearch,其实是filebeat+logstah+es+kinbana+hdfs集群,发现了很多的坑,譬如时区问题,字段问题,写入hdfs问题,等等。现在做下总结,方便以后查阅:
默认解析时间是UTC0,其实用es没啥问题,但是hdfs采集的时候需要争取的时
[……]阅读全文