前言 前面介绍了es7相关的一些用法。这一节我们来实践下集群高可用搭建，以及账号权限的配置。之前看了很多博主介绍的都是从主模式，主节点挂了集群也就不能对外服务了。 目前使用的最新版本7.6.0。账号配置需要破解x-pack包。（如果不需要设置密码可以忽略） 配置 集群间证书认证 不需要用户权限配置可以忽略。 ## 在 $ES_HOME 目录下执行 bin/elasticsearch-certutil ca ## 直接回车默认是生成文件 elastic-stack-ca.p12 Please enter the desired output file [elastic-stack-ca.p12]: ... # 生成 elastic-stack-ca.p12后，执行命令elasticsearch-certutil bin/elasticsearch-certutil cert --ca $ES_HOME/elastic-stack-ca.p12 ... # 直接回车生成elastic-certificates.p12文件 # 然后将生成的文件拷贝到各个节点的config下 elasticsearch.yml 主节点： # 集群名称 cluster.name: "es_cluster" # 节点名称 master1 node.name: master1 # 是否可以成为master节点 node.master: true # 是否允许该节点存储数据,默认开启 node.data: true # 网络绑定,这里我绑定 0.0.0.0,支持外网访问 network.host: ["0.0.0.0"] # 设置对外服务...

HCIA-Big Data V3.0介绍： 本系列共14课内容，其中第1-8课、第10、12课由重庆邮电大学副教授雷大江老师讲解，剩余4课由华为认证大数据讲师讲解。 内容按顺序依次是：大数据发展趋势与鲲鹏大数据，HDFS和ZooKeeper，Hive分布式数据仓库，HBase、MapReduce和Yarn技术原理，Spark基于内存的分布式计算，Flink流批一体分布式实时处理引擎，Flume海量日志聚合，Loader数据转换，Kafka分布式消息订阅系统，LDAP Kerberos，分布式全文检索服务ElasticSearch，Redis内存数据库，华为大数据解决方案。 因该系列主要讲解常用的大数据组件基础技术，各课程之前基本相互独立，故你可以选择按顺序进行学习，也可以按照自己对各部分内容的熟悉程度，进行课程选择学习。

国内下载elasticsearch和kibana,ELK,EFK镜像发现华为云有一个好用的国内镜像https://mirrors.huaweicloud.com/elasticsearch/7.6.2/https://mirrors.huaweicloud.com/kibana/7.6.2/亲测下载速度非常快需要不同版本只需将上面url后面的版本替换即可

Centos安装filebeat将nginx日志推送给EFK(ELK) 1,根据kibana面板的向导-添加日志数据。 2，选择  Nginx 日志 ， 会有以下提示。 3，根据提示，我这里安装nginx的是Centos6系统，安装filebeat日志采集软件。 4，配置/etc/filebeat/filebeat.yml 文件，由于我是在k8s环境中安装的EFK集群，没有使用nodeport，使用的ingress, 所以我在配置文件中host都是使用的域名加端口。EFK集群可以识别出来。 5，配置filebeat nginx 模块。     启用和配置 nginx 模块   filebeat modules enable nginx filebeat modules list #查看哪些模块开启 在 /etc/filebeat/modules.d/nginx.yml 文件中修改设置如下： ...

Kubernetes K8S之Helm部署ELK/EFK日志分析系统 主机配置规划 服务器名称(hostname) 系统版本 配置 IP   k8s-master CentOS8 2C/4G/20G 192.168.137.22   k8s-node01 CentOS7 2C/4G/20G 192.168.137.18   k8s-node02 CentOS7 2C/4G/20G 192.168.137.14   备注：由于EFK部署比较消耗内存；所以每台机器的内存最好大于等于4G。 ELK概述 ELK是Elasticsearch、Logstash、Kibana的简称，这三者是核心套件，但并非全部。 Elasticsearch是实时全文搜索和分析引擎，提供搜集、分析、存储数据三大功能；是一套开放REST和JAVA API等接口，提供高效搜索功能，可扩展的分布式系统。它构建于Apache Lucene搜索引擎库之上。 Logstash是一个用来搜集、分析、过滤日志的工具。它支持几乎任何类型的日志，包括系统日志...