Centos安装部署filebeat做轻量化日志采集入库     最近在做日志采集相关的内容的需求，记录一下通过filebeat实现轻量化日志采集入库。日志采集的实现方案有很多种，比如logstash、fluentd、flume、betas等。为什么选择filebeat呢？因为logstash是jvm跑的，资源消耗比较大，启动一个logstash就需要消耗500M左右的内存，而filebeat是基于golang开发的，依赖极少，运行时只需要10多M内存资源消耗。工作原理    Filebeat可以保持每个文件的状态，并且频繁地把文件状态从注册表里更新到磁盘。这里所说的文件状态是用来记录上一次Harvster读取文件时读取到的位置，以保证能把全部的日志数据都读取出来，然后发送给output。如果在某一时刻，作为output的ElasticSearch或者Logstash变成了不可用，Filebeat将会把最后的文件读取位置保存下来，直到output重新可用的时候，快速地恢复文件数据的读取。在Filebaet运行过程中，每个Prospector的状态信息都会保存在内存里。如果Filebeat出行了重启，完成重启之后，会从注册表文件里恢复重启之前的状态信息，让FIlebeat继续从之前已知的位置开始进行数据读取。安装filebeat服务1.下载和安装key文件rpm --import https://packages.elastic.co/GPG-KEY-elasticsearch2.创建yum源文件vim /etc/yum.repos.d/elk-elasticsearch.repo在新建的源文件中添加如下配置[elastic-5.x] name=Elastic repository for 5.x packages baseurl=https://artifacts.elastic.co/packages/5.x/yum gpgcheck=1 gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearch enabled=1 autorefresh=1 type=rpm-md3.yum安装filebeatyum install filebeat4.启动filebeatsystemctl start filebeat5.查看filebeat运行状态systemctl status filebeat或ps -ef | grep filebeat6.配置filebeat采集源文件和输出vim /etc/filebeat/filebeat.yml配置采集日志文件源：filebeat.prospectors: - input_type: log   paths:     - /var/lib/docker/containers/*/*.log配置输出：1).输出到elasticsearch：output.elasticsearch:   hosts: ["127.0.0.1:9200"]2).输出到redis：output.redis:   hosts: ["127.0.0.1:6379"]   password: "M123456"   data_type: "list"   key: "filebeat"   db: "0"   timeout: 307.重启filebeat服务systemctl restart filebeat至此，filebeat安装及配置完成！

互点群、互助群、微信互助群 场景：玩小游戏的时候，想在游戏中更好的体验，更好的装备，经验加成。玩微信小程序的时候，想了解更多，想互相提供帮助，想能帮你什么的。在小程序中买火车票，想好友一键提速的。外卖红包互帮互助拆的。拼夕夕砍一刀。微信阅读，互读文章增加福利的等等。本人小白为了满足上面需求啊啊，千愁万虑。尝试创建小群，小群活跃，环境良好，无广告。欢迎大家互粉。时过三日，英雄豪杰、窈窕淑女纷纷涌入，同时也招揽了想入非非的不凡份子。滋立下群规：禁止发低俗信息禁止刷屏，连续三条以上禁止打广告注： 低俗信息包括色情、诱骗、辱骂、敏感、违法等内容，以上违者直接移除！夜间无人响应，等到第二天会通过申请，感谢理解。? 扫描下面二维码，欢迎互粉，我拉你入群，长期有效。? 请先收藏链接防走丢，完成后刷新即可。

广州市人才引进报告模板(最新版_广州落户专用) 广州市人才引进报告模板(最新版_广州落户专用)

php采集实战-模拟登录及爬虫实战 php采集实战-模拟登录及爬虫实战PHP 获取远程文件的几种方式-PHP 模拟登录及爬虫实战PHP 模拟登录及爬虫实战那些年一起挖过的“防采集”坑-PHP 模拟登录及爬虫实战浅析 PHP 爬虫和后续处理-PHP 模拟登录及爬虫实战实战微信自动投票工具-PHP 模拟登录及爬虫实战

玩转算法面试 leetcode 玩转算法面试 leetcode    算法（Algorithm）是指解题方案的准确而完整的描述，是一系列解决问题的清晰指令，算法代表着用系统的方法描述解决问题的策略机制。能够对一定规范的输入，在有限时间内获得所要求的输出。