☰

Как кластеризовать rabbitmq в aws

tag-icon • tag-icon amazon-web-services docker ubuntu-14.04 rabbitmq erlang
Как кластеризовать rabbitmq в aws

Я перепробовал все мыслимые комбинации в попытке кластеризовать rabbitmq в среде AWS. Но подведем итог:

  1. Завершил работу и удалил дистрибутивы Erlang и Rabbit на моем локальном Ubuntu 14.
  2. Пробовал модули автоматической конфигурации в Интернете
  3. Версия Ubuntu 14, установленная по умолчанию, не подойдет.
  4. Соответствие куки-файлов Erlang — это показано ниже.

Несоответствие имени хоста — единственная загадка. Сам узел думает, что его имя хоста — «q1» или «q2» соответственно. Когда я пытаюсь установить имя хоста контейнера на имя частного DNS хоста (чтобы он мог подключиться к другому узлу), экземпляр rabbit в контейнере падает. Не ниже, как hostnameпроизводит q2, но я зашел в частный DNS Amazon?

root@q2:~# hostname
q2
root@q2:~# exit
christian@q2:~$ logout
Connection to ip-10-0-3-101.us-west-2.compute.internal closed.

Я использую последнюю версию образа RabbitMQ Docker.

docker run -d --restart always --hostname q1 --name rabbitmq -p 4369:4369 -p 15671:15671 -p 25672:25672 -p 15672:15672 -p 5672:5672 -e RABBITMQ_HIPE_COMPILE=1 -e RABBITMQ_ERLANG_COOKIE='ilikecookies' rabbitmq:3-management

Служба запускается просто отлично.

root@q1:~# curl -I localhost:15672
HTTP/1.1 200 OK
Content-Length: 1419
Content-Type: text/html
Date: Fri, 20 Jan 2017 22:46:12 GMT
last-modified: Fri, 20 Jan 2017 22:38:45 GMT
Server: MochiWeb/1.0 (Any of you quaids got a smint?)

А вот и куки с хоста q1

root@q1:~# docker exec -it rabbitmq /bin/bash
root@q1:/# cat /var/lib/rabbitmq/.erlang.cookie                                                                               
ilikecookies
root@q1:/#

Теперь я пытаюсь объединить его в кластер (с хоста q2, где q1 является главным)

root@q2:~# docker exec -it rabbitmq /bin/bash
root@q2:/# rabbitmqctl stop_app
Stopping node rabbit@q2 ...
root@q2:/# rabbitmqctl join_cluster [email protected]
Clustering node rabbit@q2 with '[email protected]' ...
Error: unable to connect to nodes ['[email protected]']: nodedown

DIAGNOSTICS
===========

attempted to contact: ['[email protected]']

[email protected]:
  * connected to epmd (port 4369) on ip-10-0-3-56.us-west-2.compute.internal
  * epmd reports node 'rabbit' running on port 25672
  * TCP connection succeeded but Erlang distribution failed
  * suggestion: hostname mismatch?
  * suggestion: is the cookie set correctly?
  * suggestion: is the Erlang distribution using TLS?

current node details:
- node name: 'rabbitmq-cli-41@q2'
- home dir: /var/lib/rabbitmq
- cookie hash: quN0y0GUm2Zxv8VYc2eX9A==

root@q2:/# cat /var/lib/rabbitmq/.erlang.cookie
ilikecookies
root@q2:/#

ВопросКАК вы заставляете эти вещи кластеризоваться? Какого ингредиента не хватает? Сообщение об ошибке ничего не значит в Интернете. У кого-нибудь есть опыт в этом?

ОБНОВЛЯТЬ Группа безопасности AWS для этих экземпляров:

Custom TCP Rule
TCP
1024 - 65535
0.0.0.0/0

решение1

Ладно, я понял!

имена хостов каждого узла должны быть выстроены в линию внутри контейнера.

На хост-машине (q2) я проверил, какие хосты ей известны в файле hosts:

# This file was generated by OpsWorks
# any manual changes will be removed on the next update.

# The following lines are desirable for IPv6 capable hosts
::1 ip6-localhost ip6-loopback
fe00::0 ip6-localnet
ff00::0 ip6-mcastprefix
ff02::1 ip6-allnodes
ff02::2 ip6-allrouters
ff02::3 ip6-allhosts

# OpsWorks Layer State
127.0.0.1 localhost.localdomain localhost
127.0.1.1 q2.localdomain q2

10.0.3.56 q1.localdomain q1
10.0.3.101 q2.localdomain q2


root@q2:/# ping q1
PING q1.local (10.0.3.56): 56 data bytes
^C--- q1.local ping statistics ---
2 packets transmitted, 0 packets received, 100% packet loss

Затем мне пришло в голову, что совершенно неважно, что знает хост-машина, а важно, что знает контейнер docker. Поэтому я зашел в контейнер и сделал то же самое:

root@q2:/# cat /etc/hosts
127.0.0.1   localhost
::1 localhost ip6-localhost ip6-loopback
fe00::0 ip6-localnet
ff00::0 ip6-mcastprefix
ff02::1 ip6-allnodes
ff02::2 ip6-allrouters
172.17.0.2  q2.local

Вот теперь мы на верном пути! Итак, я добавил запись для мастера узла:

root@q2:/# echo "10.0.3.56    q1.local q1" >> /etc/hosts
root@q2:/# which ping
/bin/ping
root@q2:/# ping q1
PING q1.local (10.0.3.56): 56 data bytes

И, снова замахнулся внутрь контейнера

root@q2:/# rabbitmqctl stop_app
Stopping node rabbit@q2 ...
root@q2:/# rabbitmqctl join_cluster rabbit@q1                                     
Clustering node rabbit@q2 with rabbit@q1 ...
root@q2:/#

И теперь каждый узел распознает, что он кластеризован! Ура!

Я думаю, что для кластеризации с помощью Docker я собираюсь изменить команду Docker, чтобы смонтировать /etc/hostsфайл hosts в образ Docker, -v /etc/hosts:/etc/hosts:roи тогда это должно просто волшебным образом работать.

Еще один шаг, о котором я забыл упомянуть: на локальном компьютере с Ubuntu была запущена старая версия Erlang, которую мне пришлось удалить (а также там был Rabbit).

Связанный контент