Docker Swarm上寫一個聊天室應用chitchat

這篇文章主要介紹“Docker Swarm上寫一個聊天室應用chitchat”，在日常操作中，相信很多人在Docker Swarm上寫一個聊天室應用chitchat問題上存在疑惑，小編查閱了各式資料，整理出簡單好用的操作方法，希望對大家解答”Docker Swarm上寫一個聊天室應用chitchat”的疑惑有所幫助！接下來，請跟著小編一起來學習吧！

Phoenix web應用和其他語言/框架實現的web應用相比最大的不同點在于，Phoenix應用能在有狀態的情況下依然保持很好的橫向擴展能力，這得益于其底層的Erlang OTP支持。為了能在集群中的各節點之間共享狀態，各節點只需相互認識即可，并不需要單獨開一個狀態容器（如Redis），這也使得Phoenix應用的架構更為簡單明了。Elixir 1.9更加入了對release的支持，也使得打包部署更加方便。但是，這些都僅限于傳統的、預先知道集群容量和各節點IP的部署方式。如何能在Docker Swarm上，在不預先知道各節點IP的情況下部署Phoenix應用并做到動態擴容成了下一個挑戰。今天就來嘗試部署一下最典型的有狀態web應用——基于WebSocket的聊天室。

寫一個聊天室應用chitchat

因為不是重點所以不寫了。如果你不會寫，直接去GitHub上拉代碼

Release準備

這里只做最簡單的準備。

$ mix release.init

我們還需要在config/prod.secret.exs里加一行代碼讓我們release出來的包（artifact）知道要啟動所有相關的application。

config :chitchat, ChitchatWeb.Endpoint, server: true

創建Docker鏡像

在項目的根目錄下創建Dockerfile，并加入以下內容：

FROM elixir:1.9.1-alpine as build

# install build dependencies
RUN apk add --update git build-base nodejs npm yarn python

# prepare build dir
RUN mkdir /app
WORKDIR /app

# install hex + rebar
RUN mix local.hex --force && \
    mix local.rebar --force

# set build ENV
ENV MIX_ENV=prod

# install mix dependencies
COPY mix.exs mix.lock ./
COPY config config
RUN mix deps.get
RUN mix deps.compile

# build assets
COPY assets assets
RUN cd assets && npm install && npm run deploy
RUN mix phx.digest

# build project
COPY priv priv
COPY lib lib
RUN mix compile

# build release
COPY rel rel
RUN mix release

# prepare release image
FROM alpine:3.9 AS app
RUN apk add --update bash openssl

RUN mkdir /app
WORKDIR /app

COPY --from=build /app/_build/prod/rel/chitchat ./
RUN chown -R nobody: /app
USER nobody

ENV HOME=/app

這是從Phoenix官方文檔里直接復制過來的，除了改了一下應用名稱和在apk add里添加了npm以及把COPY rel rel放出來以外什么都沒改。

這是一個multi-stage的Dockerfile，為了使最終生成的鏡像盡可能小，我們把Elixir、Mix、node.js等運行時不需要的東西全都留在了build階段的鏡像里，只把最終release出來的東西（包含Erlang運行時）放進了最終鏡像。我這里構建出來的docker鏡像約35MB。雖然現在已經能構建了，但我暫時不構建。

創建Swarm

為了圖方便，我只做了單節點swarm：

$ docker swarm init

如果你手上有3臺以上的電腦，你也可以做全尺寸swarm。這不是重點所以略過。如果你不知道怎么做，參考官方教程。

本地化Docker Registry

由于部署到swarm集群里的服務必須使用預先構建好的鏡像（如果每個節點各自構建鏡像又慢又耗資源），而實際生產環境下每個鏡像可能會很大（上G），所以我們需要一個在內網里的Docker Registry來注冊并在各個節點上共享鏡像。

在任意manager節點上運行

$ docker service create --name registry -p 5000:5000 registry:2

這一句會在你的swarm里創建一個名為registry的服務，用的鏡像是Docker官方的registry:2，公開5000端口。它只有一個replica。

構建鏡像并推上Registry

運行命令

$ docker build --tag 127.0.0.1:5000/chitchat:0.1.0 .

即可構建出鏡像。版本號最好和mix.exs里的保持一致。注意，Docker Registry貌似不會覆蓋已有鏡像（待考證），所以版本號最好不要用latest。127.0.0.1:5000是registry的IP地址和端口號，根據你的swarm的實際情況改之。構建完后運行命令

$ docker push 127.0.0.1:5000/chitchat:0.1.0

就能將這個鏡像推到本地的registry上了。

docker-compose.yml

在項目的根目錄下創建docker-compose.yml，并添加下列內容：

version: '3.7'

services:
  app:
    image: 127.0.0.1:5000/chitchat:0.1.0
    ports:
      - 80:4000
    entrypoint: ./bin/chitchat start
    deploy:
      mode: replicated
      replicas: 3

除了deploy項之外，這可以算是最簡單的docker-compose配置文件了。先跑跑看

$ docker-compose up

它應該能直接跑起來（雖然會有警告說deploy項無效），訪問80端口、連接ws應該都沒問題。

接著我們嘗試部署到swarm上（單節點的同學記得把剛才的試運行關掉哦）：

$ docker stack  deploy -c ./docker-compose.yml chitchat

確認服務都起來了

$ docker stack services chitchat

應該看到如下內容：

ID                  NAME                MODE                REPLICAS            IMAGE                           PORTS
x2eym27lc2b8        chitchat_app        replicated          3/3                 127.0.0.1:5000/chitchat:0.1.0   *:80->4000/tcp

如果看到REPLICAS是3/3，說明部署成功，如果一直是0/3，則檢查你的代碼有沒有問題。

為了接下來的調試，先跟蹤一下日志：

$ docker service logs -f chitchat_app

然后打開兩個瀏覽器窗口/標簽，訪問一下 http://127.0.0.1/rooms/1 ，看一下日志確保ws連接到了不同的replica上，如果連在了同一個上面，則刷新其中一個窗口，直到它連到了不同的replica為止。發一條消息試試，你會發現 另一個窗口收不到消息！

問題出在哪兒了？問題出在各個節點上的epmd（Erlang Process Manager）各自為政，沒有連接到一起。所以下一步就是想辦法把它們連起來。

我們知道Elixir有一個函數Node.connect/1可以連接到其他節點，只要它們有相同的cookie。問題在于，這種連接方式需要預先知道對方的IP或域名或主機名。但是在一個容器編排系統（container orchestration system）里，容器的IP、域名和主機名都是動態分配的，尤其是在容器宕掉重啟后，它的IP、域名和主機名很可能會改變。在這種動態的集群里，怎么才能讓容器找到自己的兄弟呢？

思路是利用Docker的基于DNS的服務發現機制。在Docker Swarm里，每個服務都帶有一個服務發現用的域名，它是tasks.<服務名>，在我們的這套配置里，它是tasks.chitchat_app。如果你在任意一個replica容器里運行nslookup tasks.chitchat_app，你會看到所有replica的IP地址。有了IP地址，接下來只要知道節點的基本名稱（節點名稱@前面的部分）就行了。這個名稱很容易找，因為Elixir的release啟動時，環境變量$RELEASE_NAME已經設好了這個名稱。

看起來不錯，先試一下。讓我們先登上1號容器（把那個xxx換成實際值，其實只需要敲Tab就行了）：

$ docker exec -it chitchat_app.1.xxx sh

獲得其他容器的IP地址：

$ nslookup tasks.chitchat_app

然后attach到正在運行的chitchat進程，并嘗試連接其他節點（假定它的IP是10.0.0.3）：

$ ./bin/chitchat remote
iex> Node.connect(:"chitchat@10.0.0.3")

你會發現連不上。問題在哪兒？看看當前節點的名稱是啥：

iex> Node.self()
:"nonode@nohost"

問題就在這兒。我們的節點沒有名稱！為了讓每個節點有自己的名稱，我們需要修改rel/env.sh.eex。

修改rel/env.sh.eex

放開下面兩行：

export RELEASE_DISTRIBUTION=name
export RELEASE_NODE="<%= @release.name %>@127.0.0.1"

這個文件用于生成env.sh，而env.sh會在每次應用啟動的時候運行，用來設置環境變量。

還有一個問題，怎么把127.0.0.1替換成真正的容器的IP？如果你在某個容器里運行hostname -i，你會得到當前的IP（比較有意思的是，如果你在自己的PC上運行這句命令，你只能拿到127.0.1.1）。所以我們只要把RELEASE_NODE那一行改成

export RELEASE_NODE="<%= @release.name %>@$(hostname -i)"

就一切OK了。順帶一提，rel/env.bat.eex可以不改，因為我們的容器跑的不是Windows而是Alpine Linux。

重新部署一下，再嘗試一下連接其他節點，可以看到這次就能連上了。

下一個問題就是怎么讓它自動連，而且周期性地反復連。這里我用了一個第三方庫Peerage。

集成Peerage

安裝方式請自行看官網。我只將我的配置貼出來：

# config/prod.exs
config :peerage, via: Peerage.Via.Dns,
  dns_name: "tasks.chitchat_app",
  app_name: {:system, "RELEASE_NAME"}

這里的dns_name就是Peerage去訪問的DNS域名。而app_name則是節點名稱@前面的部分。{:system, "RELEASE_NAME"} 告訴Peerage這個名稱要去環境變量$RELEASE_NAME里找。Peerage會周期性地訪問DNS獲取IP，并在每個IP前面加上<app_name>@，然后嘗試連接這些節點。

重新部署一下，然后在某個replica上運行

$ ./bin/chitchat rpc "IO.inspect Node.list"

你會看到其他節點的名稱，這表明所有節點都已連上了。

你還可以嘗試擴張/縮水當前的服務（參考docker service scale），殺掉某個容器（docker kill）等操作，看看行為是否和預期一樣。

到此，關于“Docker Swarm上寫一個聊天室應用chitchat”的學習就結束了，希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學習，快去試試吧！若想繼續學習更多相關知識，請繼續關注億速云網站，小編會繼續努力為大家帶來更多實用的文章！