ELK集群

Cat <<EOF <<中止符号

Cat >f1 <<EOF

重定项 < > >> <<

Stdin 0 标准输入（读）

Stdout 1 标准输出（写）

Stderr 2 标准错误（写）

[root@rootroom9pc01 ~]# ulimit -n

1024

在linux中都是文件

文件描述符

[root@rootroom9pc01 ~]# cd /proc/$$

[root@rootroom9pc01 4990]# cd fd

[root@rootroom9pc01 fd]# ls

0 1 2 255

[root@rootroom9pc01 fd]# cat /etc/passwd > 1

Echo $$

Echo “hello” > /proc/12345/fd/1

Echo “hello” > /dev/tcp/192.168.6.10/80

Tcpdump -i eth0 -n -xx -v host 192.168.6.10/80

Exec ls

Cat ff

Exec 2> ff

Tail -f ff

Rm -f ff

Exec 1> ff //修改文件描述符

Cat ff

Exec 创建文件描述符

Exec 6>ff

Cat f1 >$6 //对文件描述符操作就是对文件操作

Cat ff

Cd /proc/$$/fd

Exec 6>&-

Cat ff

#!/bin/bash

Exec 9<>/dev/tcp/www.baidu.com/80

Echo -ne “GET /index.html HTTP/1.1\r\n” >&9

Echo -ne “Host: www.baidu.com\r\n\r\n” >&9

Cat &9

Chmod 755 ff

Curl www.baidu.com

Man bash

/dev/udp

/dev/stdin

ELK是什么？

ELK其实并不是一款软件，而是一整套解决方案，是三个软件产品的首字母缩写

Elasticsearch:负责日志检索和储存

Logstash：负责日志的收集和分析、处理

Kibana：负责日志的可视化

这三款软件都是开源软件，通常是配合使用，而且又先后归于Elastic.co公司名下，故被简称为ELK

ELK能做什么？

ELK组件在海量日志系统的运维中，可用于解决：

分布式日志数据集中式查询和管理

系统监控，包含系统硬件和应用各个组件的监控

– 故障排查

– 安全信息和事件管理

– 报表功能

cd /etc/libvirt/qemu/

[root@rootroom9pc01 qemu]# sed 's/demo/node1/' demo.xml > /etc/libvirt/qemu/node1.xml

cd /var/lib/libvirt/images/

[root@rootroom9pc01 images]# qemu-img create -b node.qcow2 -f qcow2 node1.img 20G

[root@rootroom9pc01 qemu]# virsh define /etc/libvirt/qemu/node1.xml

virsh # start node1

virsh # console node1

[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

DEVICE=eth0

ONBOOT=yes

IPV6INIT=no

BOOTPROTO=static

TYPE=Ethernet

IPADDR="192.168.6.11"

NETMASK="255.255.255.0"

GATEWAY="192.168.6.254"

halt -p

virsh # start node1

[root@localhost ~]# hostnamectl set-hostname es1

[root@localhost ~]# exit

logout

CentOS Linux 7 (Core)

Kernel 3.10.0-693.el7.x86_64 on an x86_64

es1 login:

[root@es1 ~]# ifconfig

eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST> mtu 1500

inet 192.168.6.11

[root@rootroom9pc01 ~]# yum search openjdk

vim /etc/hosts

192.168.6.11 es1

[root@rootroom9pc01 ~]# mv '/root/桌面/ARCHITECTURE/architecture 02/elk/elk 1/elasticsearch-2.3.4.rpm' /var/ftp/public/ansible_soft/

[root@rootroom9pc01 ansible_soft]# ls

ansible-2.4.2.0-2.el7.noarch.rpm python-paramiko-2.1.1-4.el7.noarch.rpm

elasticsearch-2.3.4.rpm python-passlib-1.6.5-2.el7.noarch.rpm

python2-jmespath-0.9.0-3.el7.noarch.rpm repodata

python-httplib2-0.9.2-1.el7.noarch.rpm sshpass-1.06-2.el7.x86_64.rpm

[root@rootroom9pc01 ansible_soft]# createrepo --update ./

[root@es1 ~]# cat /etc/yum.repos.d/local.repo

[local_source]

name=CentOS Source

baseurl=ftp://192.168.6.254/public/ansible_soft

enabled=1

gpgcheck=0

[local_centos]

name=CentOS

baseurl=ftp://192.168.6.254/centos7

enabled=1

gpgcheck=0

[root@es1 ~]# yum -y install java-1.8.0-openjdk

[root@es1 ~]# yum -y install elasticsearch

vim /etc/elasticsearch/elasticsearch.yml

network.host: 0.0.0.0

[root@es1 ~]# systemctl start elasticsearch

firefox:http://192.168.6.11:9200

{
  "name" : "Valinor",
  "cluster_name" : "elasticsearch",
  "version" : {
    "number" : "2.3.4",
    "build_hash" : "e455fd0c13dceca8dbbdbb1665d068ae55dabe3f",
    "build_timestamp" : "2016-06-30T11:24:31Z",
    "build_snapshot" : false,
    "lucene_version" : "5.5.0"
  },
  "tagline" : "You Know, for Search"
}
  "name" : "Valinor",
  "cluster_name" : "elasticsearch",
  "version" : {
    "number" : "2.3.4",
    "build_hash" : "e455fd0c13dceca8dbbdbb1665d068ae55dabe3f",
    "build_timestamp" : "2016-06-30T11:24:31Z",
    "build_snapshot" : false,
    "lucene_version" : "5.5.0"
  },
  "tagline" : "You Know, for Search"
}

elasticsearch 集群安装

一共安装 5 台 ES 数据库节点

配置所有主机的 /etc/hosts

192.168.1.11 es1

192.168.1.12 es2

192.168.1.13 es3

192.168.1.14 es4

192.168.1.15 es5

在所有节点安装

yum install -y java-1.8.0-openjdk elasticsearch

修改配置文件 vim /etc/elasticsearch/elasticsearch.yml

cluster.name: nsd1803

node.name: 本机主机名称

network.host: 0.0.0.0

discovery.zen.ping.unicast.hosts: ["es1", "es2", "es3"]

curl h ttp://192.168.6.11:9200/_cluster/health?pretty

与启动顺序有关

失败时重启服务即可

[root@es1 ~]# systemctl restart elasticsearch

猜你喜欢