Public:Docker-and-ELK - История изменений

Demi: Demi переименовал страницу Docker-and-ELK в Public:Docker-and-ELK

2019-08-08T08:30:45Z

Demi переименовал страницу Docker-and-ELK в Public:Docker-and-ELK

Vabidash в 14:15, 17 мая 2019

2019-05-17T14:15:49Z

Vabidash в 14:13, 17 мая 2019

2019-05-17T14:13:07Z

Vabidash в 14:05, 17 мая 2019

2019-05-17T14:05:19Z

Vabidash в 12:49, 17 мая 2019

2019-05-17T12:49:07Z

Vabidash в 12:48, 17 мая 2019

2019-05-17T12:48:17Z

Vabidash в 12:19, 17 мая 2019

2019-05-17T12:19:29Z

Vabidash в 12:10, 17 мая 2019

2019-05-17T12:10:31Z

Vabidash в 12:00, 17 мая 2019

2019-05-17T12:00:54Z

Vabidash в 11:51, 17 мая 2019

2019-05-17T11:51:27Z

@@ Строка 66: / Строка 66: @@
   I/O size (minimum/optimal): 512 bytes / 512 bytes
 В "/var/data" созданы две директории ELK и docker.<br>
-* Директория ELK предназначена для хранения данных и логов приложений Elastic Stack в соответствующих поддиректориях,<br> которые монтируются в контейнеры соответствующими командами при создании нового контейнера.
+* Директория ELK предназначена для хранения данных и логов приложений Elastic Stack в соответствующих поддиректориях,<br>которые монтируются в контейнеры соответствующими командами при создании нового контейнера.
-* Директория docker предназначена для создания, хранения и монтирования в контейнеры конфигурационных файлов,<br> использующихся приложениями Elasticsearch, Logstash, Kibana.
+* Директория docker предназначена для создания, хранения и монтирования в контейнеры конфигурационных файлов,<br>использующихся приложениями Elasticsearch, Logstash, Kibana.
 Контейнер ES1 - представляет собой запущенную службу Elasticsearch, которой,<br> при создании контейнера из образа в локальном репозитории docker, подмонтировали конфигурационные файлы,<br> а также директории, куда служба будет писать данные и логи. Предназначена служба для хранения и поиска по собранной информации из Logstash. Контейнер создан командой:
@@ Строка 85: / Строка 85: @@
   --network=elknet --ip=172.27.0.4 --restart=always docker.elastic.co/kibana/kibana:7.0.1
 Здесь на себя обращает внимание строка "-p 5601:5601". Этим docker создает на хостовой машине правило DNAT в iptables,<br>которое перенаправит tcp трафик непосредственно на контейнер.
-При обновлении, либо при любых других важных изменениях,<br> полезно делать экспорт сохраненных объектов из самого интерфейса Kibana (Management->Saved Ojects->Export) в файл json.
+При обновлении, либо при любых других важных изменениях,<br>полезно делать экспорт сохраненных объектов из самого интерфейса Kibana (Management->Saved Ojects->Export) в файл json.
 В контейнер смонтированы:
 * /var/data/ELK/Kibana/:/Kibana - логи
@@ Строка 99: / Строка 99: @@
 * /var/data/ELK/Logstash/:/Logstash - данные и логи
 * /var/data/docker/ELK-conf/ELK/logstash/logstash.yml:/usr/share/logstash/config/logstash.yml - общий конфигурационный файл.
-* /var/data/docker/ELK-conf/ELK/logstash/pipeline:/usr/share/logstash/pipeline/ - директория с конфигурационными файлами т.н. pipeline, определяющими: input, filter и output.<br> Файлы в директории pipeline проверяются на изменения настроек автоматически каждые 5 минут.<br> Данная опция установлена в общей конфигурации logstash.yml.
+* /var/data/docker/ELK-conf/ELK/logstash/pipeline:/usr/share/logstash/pipeline/ - директория с конфигурационными файлами т.н. pipeline, определяющими: input, filter и output.<br>Файлы в директории pipeline проверяются на изменения настроек автоматически каждые 5 минут.<br>Данная опция установлена в общей конфигурации logstash.yml.

@@ Строка 74: / Строка 74: @@
   --network=elknet --ip=172.27.0.2 --restart=always docker.elastic.co/elasticsearch/elasticsearch:7.0.1
 Как можно увидеть, в контейнер монтируется директория для данных .../ES1(на хосте):/ES1(в контейнере) и файл конфигурации elastisearch.yml аналогично.<br>Содержание файла можно менять при надобности и сделать рестарт контейнера командой "docker restart ES1".<br>В этом случае подтянется новая версия файла. Контейнер создан с флагом "--restart=always", что означает контейнер всегда будет пытаться запуститься.<br>При ошибочной конфигурации контейнер может уходить в "петлю" на запуске, прервать процесс можно командой "docker stop ES1".<br>
 IP адрес в виртуальной сети 172.27.0.2, что также можно увидеть из команды.
 Контейнер Kibana - служба Kibana, представляет из себя удобный вэб интерфейс для визуализации, поиска и работы с данными службы Elasticsearch.<br>Конфигурация достаточно простая, монтируется во внутрь контейнера по примеру контейнера ES1. Создан контейнер командой:
@@ Строка 82: / Строка 86: @@
 Здесь на себя обращает внимание строка "-p 5601:5601". Этим docker создает на хостовой машине правило DNAT в iptables,<br>которое перенаправит tcp трафик непосредственно на контейнер.
 При обновлении, либо при любых других важных изменениях,<br> полезно делать экспорт сохраненных объектов из самого интерфейса Kibana (Management->Saved Ojects->Export) в файл json.
-В контейнер смонтирован конфигурационный файл
+В контейнер смонтированы:
 Контейнер Logstash - служба Logstash, сервис непосредственно принимающий логи и snmp-трапы.<br>Работает как локальная служба хоста, так как с пробросом портов именно в виртуальную сеть возникла проблема вида:<br> "некоторые из приходящих логов Logstash классифицировал, как пришедшие от источника 172.27.0.1". Создан командой:
@@ Строка 89: / Строка 95: @@
   -v /var/data/docker/ELK-conf/ELK/logstash/pipeline:/usr/share/logstash/pipeline/  \
   --network=host --restart=always docker.elastic.co/logstash/logstash:7.0.1
-Права root требуются контейнеру для запуска службы на привилегированных портах 514 и 162. Порт 5044 не используется (Filebeat) и 9600 (Logstash API) слушает запросы.
+Права root требуются контейнеру для запуска службы на привилегированных портах 514 и 162. Порт 5044 (Filebeat) не используется, и порт 9600 (Logstash API) слушает запросы.
 В контейнер смонтрированы директории:
- * /var/data/ELK/Logstash/:/Logstash - данные и логи
+* /var/data/ELK/Logstash/:/Logstash - данные и логи
- * /var/data/docker/ELK-conf/ELK/logstash/logstash.yml:/usr/share/logstash/config/logstash.yml - общий конфигурационный файл.
+* /var/data/docker/ELK-conf/ELK/logstash/logstash.yml:/usr/share/logstash/config/logstash.yml - общий конфигурационный файл.
- * /var/data/docker/ELK-conf/ELK/logstash/pipeline:/usr/share/logstash/pipeline/ - директория с конфигурационными файлами т.н. pipeline, определяющими: input, filter и output.<br> Файлы в директории pipeline проверяются на изменения настроек автоматически каждые 5 минут. Данная опция установлена в общей конфигурации logstash.yml.
+* /var/data/docker/ELK-conf/ELK/logstash/pipeline:/usr/share/logstash/pipeline/ - директория с конфигурационными файлами т.н. pipeline, определяющими: input, filter и output.<br> Файлы в директории pipeline проверяются на изменения настроек автоматически каждые 5 минут.<br> Данная опция установлена в общей конфигурации logstash.yml.

@@ Строка 76: / Строка 76: @@
 IP адрес в виртуальной сети 172.27.0.2, что также можно увидеть из команды.
-Контейнер Kibana - служба Kibana, представляет из себя удобный вэб интерфейс для визуализации, поиска и работы с данными службы Elasticsearch.<br>Конфигурация достаточно простая, монтируется во внутрь контейнера так же как и в контейнере ES1. Создан контейнер командой:
+Контейнер Kibana - служба Kibana, представляет из себя удобный вэб интерфейс для визуализации, поиска и работы с данными службы Elasticsearch.<br>Конфигурация достаточно простая, монтируется во внутрь контейнера по примеру контейнера ES1. Создан контейнер командой:
   docker run -t -d -h kibana -p 5601:5601 -v /var/data/ELK/Kibana/:/Kibana \
   -v /var/data/docker/ELK-conf/ELK/kibana/kibana.yml:/usr/share/kibana/config/kibana.yml \
@@ Строка 82: / Строка 82: @@
 Здесь на себя обращает внимание строка "-p 5601:5601". Этим docker создает на хостовой машине правило DNAT в iptables,<br>которое перенаправит tcp трафик непосредственно на контейнер.
 При обновлении, либо при любых других важных изменениях,<br> полезно делать экспорт сохраненных объектов из самого интерфейса Kibana (Management->Saved Ojects->Export) в файл json.

@@ Строка 81: / Строка 81: @@
   --network=elknet --ip=172.27.0.4 --restart=always docker.elastic.co/kibana/kibana:7.0.1
 Здесь на себя обращает внимание строка "-p 5601:5601". Этим docker создает на хостовой машине правило DNAT в iptables,<br>которое перенаправит tcp трафик непосредственно на контейнер.
-При обновлении, либо при любых других важных изменениях полезно делать экспорт сохраненных объектов из самого интерфейса Kibana (Management->Saved Ojects->Export) в файл json.
+При обновлении, либо при любых других важных изменениях,<br> полезно делать экспорт сохраненных объектов из самого интерфейса Kibana (Management->Saved Ojects->Export) в файл json.

@@ Строка 69: / Строка 69: @@
 * Директория docker предназначена для создания, хранения и монтирования в контейнеры конфигурационных файлов,<br> использующихся приложениями Elasticsearch, Logstash, Kibana.
-Контейнер ES1 - представляет собой запущенную службу Elasticsearch, которой,<br> при создании контейнера из образа в локальном репозитории docker, подмонтировали конфигурационные файлы,<br> а также директории, куда служба будет писать данные и логи. Контейнер создан командой:
+Контейнер ES1 - представляет собой запущенную службу Elasticsearch, которой,<br> при создании контейнера из образа в локальном репозитории docker, подмонтировали конфигурационные файлы,<br> а также директории, куда служба будет писать данные и логи. Предназначена служба для хранения и поиска по собранной информации из Logstash. Контейнер создан командой:
-   docker run -t -d -h es1 -v /var/data/ELK/ES1/:/ES1 -v \
+ docker run -t -d -h es1 -v /var/data/ELK/ES1/:/ES1 -v \
-   /var/data/docker/ELK-conf/ELK/es1/elastisearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
+ /var/data/docker/ELK-conf/ELK/es1/elastisearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-   --network=elknet --ip=172.27.0.2 --restart=always docker.elastic.co/elasticsearch/elasticsearch:7.0.1
+ --network=elknet --ip=172.27.0.2 --restart=always docker.elastic.co/elasticsearch/elasticsearch:7.0.1
-Как можно увидеть, в контейнер монтируется директория для данных .../ES1(на хосте):/ES1(в контейнере) и файл конфигурации elastisearch.yml аналогично.<br>Содержание файла можно менять при надобности и сделать рестарт контейнера командой "docker restart ES1".<br>В этом случае подтянется новая версия файла. Контейнер создан с флагом "--restart=always", что означает контейнер всегда будет пытаться запуститься.<br>При ошибочной конфигурации контейнер может уходить в "петлю" на запуске, прервать процесс можно командой "docker stop ES1".
+Как можно увидеть, в контейнер монтируется директория для данных .../ES1(на хосте):/ES1(в контейнере) и файл конфигурации elastisearch.yml аналогично.<br>Содержание файла можно менять при надобности и сделать рестарт контейнера командой "docker restart ES1".<br>В этом случае подтянется новая версия файла. Контейнер создан с флагом "--restart=always", что означает контейнер всегда будет пытаться запуститься.<br>При ошибочной конфигурации контейнер может уходить в "петлю" на запуске, прервать процесс можно командой "docker stop ES1".<br>

← Предыдущая	Версия 08:30, 8 августа 2019
(нет различий)

← Предыдущая		Версия 12:00, 17 мая 2019
Строка 73:		Строка 73:
	/var/data/docker/ELK-conf/ELK/es1/elastisearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \		/var/data/docker/ELK-conf/ELK/es1/elastisearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
	--network=elknet --ip=172.27.0.2 --restart=always docker.elastic.co/elasticsearch/elasticsearch:7.0.1		--network=elknet --ip=172.27.0.2 --restart=always docker.elastic.co/elasticsearch/elasticsearch:7.0.1
		+	Как можно увидеть, в контейнер монтируется директория для данных .../ES1(на хосте):/ES1(в контейнере) и файл конфигурации elastisearch.yml аналогично.

@@ Строка 35: / Строка 35: @@
   --ipam-opt null elknet
-У виртуальной машины два виртуальных диска: scsi0 (15G) "система"; scsi1 (100G) "данные" смонтирован соответственно: "/dev/mapper/ELK--vg-data on /var/data".
+У виртуальной машины два виртуальных диска: scsi0 (15G) "система"; scsi1 (100G) "данные" смонтирован последний соответственно: "/dev/mapper/ELK--vg-data on /var/data".
   Disk /dev/sda: 15 GiB, 16106127360 bytes, 31457280 sectors
@@ Строка 68: / Строка 68: @@
 * Директория ELK предназначена для хранения данных и логов приложений Elastic Stack в соответствующих поддиректориях,<br> которые монтируются в контейнеры соответствующими командами при создании нового контейнера.
 * Директория docker предназначена для создания, хранения и монтирования в контейнеры конфигурационных файлов,<br> использующихся приложениями Elasticsearch, Logstash, Kibana.