程式搖滾: 12月 2020

2020年12月24日星期四

nginx透過Reserver Proxy到docker grafana設定

grafana預設跑在3000的port上

要讓nginx可以upstream到grafana上

並不能只是在nginx上設定

grafana的init設定檔也需要對應設定

為了讓我們方便管理

可以透過 ansible 將本機準備好的grafana.ini丟到遠端主機上

再透過docker volumn對應將這ini檔案對應到container內設定檔的位置

docker-compose 設定

version: '3.8'
services:
  grafana:
    image: grafana/grafana
    container_name: grafana99
    restart: always
    volumes:
        - grafana_data:/var/lib/grafana
        - /home/ozzy/docker_share/monitor/grafana.ini:/etc/grafana/grafana.ini:ro
    environment:
      - GF_SECURITY_ADMIN_PASSWORD=xxxx
    depends_on:
      - prometheus
    ports:
      - '3000:3000'

grafana.ini設定

instance_name = ozzysun.com
protocol = http
http_port = 3000
domain = ozzysun.com
enforce_domain = true
root_url = http://ozzysun.com/grafana
serve_from_sub_path = true

nginx端設定

location /grafana/ {
    proxy_pass http://192.168.0.99:3000;
    proxy_set_header Host       $http_host;
    proxy_set_header X-Real-IP    $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}

test

2020年12月22日星期二

docker prometheus 儲存資料設定

當使用docker執行prometheus 有一個問題是

當有更改設定檔或是重新啟動服務

所有的資料就都清空了

要確保資料可以長久保留下來

需要將儲存資料的目錄mount到host上的資料夾

在prometheus內資料是存放在container內的 /prometheeus/data目錄下

通常docker container透過volume 去mount指定目錄就可以

但可能會遇到目錄的權限問題

open data/queries.active: permission denied

必須要將mount的host目錄權限設定與執行promethus的使用者權限才可以

譬如說我在docker compose設定以root來執行promethus

則要mount的目錄的owner 就必須要是root

 docker-compose.yml內容  
 version: '3.8'  
 services:  
  prometheus:  
   image: prom/prometheus:latest  
   user: "0:0"  
   container_name: prometheus99  
   restart: always  
   volumes:  
    - /home/ozzy/docker_share/prometheus/prometheus.yml:/etc/prometheus/prometheus.yml:ro  
    - /home/ozzy/docker_share/prometheus/prometheus_data:/prometheus  
   environment:  
    - GO15VENDOREXPERIMENT=1  
   command:  
    - '--config.file=/etc/prometheus/prometheus.yml'  
   ports:  
    - '9090:9090'

說明

通常我會使用ansible來管理docker的佈署與更新

先將需要維護的設定檔透過ansible 由開發本機複製到遠端主機host的指定目錄下

接下來再經由docker container mount volume到這指定的目錄下

來達到docker的資料管理都可以在遠端的host上

個人在這個地方卡了一些時間是因為

使用ansible在遠端主機上建立目錄

是指定了become: true也就是使用root建立

但在docker-compose內我並沒有特別設定執行的user

因次premethus是使用遠端主機登入的使用者ozzy執行

造成了寫紀錄的目錄與執行service是不同使用者而

造成權限問題

docker-compose設定的使用者是以設定UID

如果要查uid 可以使用以下指令

顯示目前使用者uid

echo $UID

顯示所有使用者id

 awk -F: '{printf "%s:%s\n",$1,$3}' /etc/passwd

如果要進入promethus container內注意內部並沒有bash 需要改呼叫sh

docker exec -it grafanaContainer sh

2020年12月10日星期四

nodejs express 非同步錯誤處理的error傳遞

情境

route main內執行 child()

child為非同步

非同步的child function可以是

1.以async宣告
const asyncFun = async(res) => {
  await sleep(2000)
  const result = JSON.parse(body)
  return result
}
2.以Promise宣告
const promiseFun = (res) => {
  return new Promise((resolve, reject) => {
    try {
      const result = JSON.parse(body)
      resolve(result)
    } catch (e) {
      reject(e)
    }
  })
}

如果child function內沒有使用try catch包裹

發生錯誤就會是往呼叫端(main)的catch丟

如果呼叫端(main)也沒有用try catch或是asyc 的catch攔截

錯誤就會往外讓express的錯誤處理接收到

有一個特別的例外是當child內有使用setTimeout把執行的工作包裝起來

那麼當發生錯誤時

若在child內寫try catch是可以攔截到但卻無法把錯誤往呼叫端丟

唯一可行的是child是使用promise寫就可以在try catch攔截到錯誤

時呼叫reject回傳給呼叫端的catch

儘可能不要在child內直接處理res回應

否則當child發生錯誤 res回應的部份不被執行

可能造成系統掛掉