顯示具有 nginx 標籤的文章。 顯示所有文章
顯示具有 nginx 標籤的文章。 顯示所有文章

2022年12月15日 星期四

nginx upstream cookie不會產生問題

 今天發生一個問題

在nodejs以 express-session建立session與cookie

原本運作都很正常

但透過nginx proxy後發現set-cookie都失效了

client browser 不會產生cookie存放session id

導致之後的使用都有問題

查了一下才發現

nginx內設定了

proxy_hide_header Set-Cookie;

拿掉就解決了

2022年8月16日 星期二

nignx alias 403Forbiden問題

今天在建立新主機遇到狀況

在nginx 以alias設定static檔案

ex:

location /test {

  alias ~/myweb;

}


但一直遇到403Forbiden

檢查檔案權限都沒有問題

解決方式是

將nignx啟動使用者設定為

檔案的擁有者 即可

也就是修改

nginx.conf 

user www-data

改成

user xxx使用者帳號

2022年7月14日 星期四

cors錯誤The 'Access-Control-Allow-Origin' header contains multiple values , *', but only one is allowed.

當在nodejs server 已經加入cors設定

就不能在nginx 設定

add_header Access-Control-Allow-Origin *;

add_header Access-Control-Allow-Methods 'GET, POST, OPTIONS';

否則就會有重複設定的錯誤

2022年2月17日 星期四

nginx基本操作

一.完全移除

  sudo apt-get remove nginx nginx-common

  sudo apt-get purge nginx nginx-common

  sudo apt-get autoremove

二.重新安裝

  sudo apt-get install nginx

三.操作

  啟動 sudo systemctl start nginx

  停止 sudo systemctl stop nginx

  重啟 sudo systemctl restart nginx

  重載config sudo nginx -s reload

四.設定檔

  /etc/nginx/available-sites/

2022年1月14日 星期五

nginx回應文字訊息sample

需要nginx簡易的回傳文字訊息

 location /test_return {

        default_type  text/plain;

        return 200  '回傳文字';

    }

2021年4月20日 星期二

window上nginx的操作紀錄

1.nginx.pid

  nginx.pid檔案內會紀錄當下運作的nginx master程序的pid

  若手動重複執行多次的nginx

  則nginx.pid內紀錄的是最後被執行的nginx master pid

2.停止nginx

  透過指令nginx -s quit或 nginx -s stop

  除了停止外同時會把nginx.pid檔案刪除

3.手動刪除nginx.pid

  因為找佈道nginx.pid,會造成nginx指令無法操作

4.由工作管理員要停止nginx程序

  若被停掉的是workder,則會自動產生新的worker程序

  停掉master程序 才能一個個刪除worker程序

  透過手動停止 nginx.pid並不會被刪除

5.安全的使用

  啟動nginx確保不要被重複產生多個master process

  停止或重啟都透過指令操作

  這樣可以透過檢查nginx.pid的存在與否 判斷nginx是否運作

2021年1月6日 星期三

nginx upstream設定

透過upstream設定多台服務的負載平衡

以一個網頁的request內用到多個連線 當範例

1.預設

  所有的連線輪詢分配到各主機上

2.least_conn

  將連線給目前連線數最少的主機

2.iphash

  以ip辨識同個ip的request都會進同一台主機


當其中有主機出問題無法服務

會透過以下兩個設定判斷 是否把該台主機排除在負載平衡外


1.fails_timeout:

  當失敗連線間隔這個設定的秒數後, 新進來的連線

  還是會對這台主機進行retry連線

2.max_fails:

  當retry失敗次數達到這個設定最大值

  還無法連線 這台機器就會背排除

以下的範例設定是

當連線失敗10s後 再接到的request會再連線這台主機

當retry達到5次後 還無法連線 這台主機就會被剔除

直到nginx 重啟

upstream myapp {
  #iphash;
  #least_conn;
  server 127.0.0.1:3000 max_fails=5 fails_timeout=10s;
  server 127.0.0.1:3001 max_fails=5 fails_timeout=10s;
}

2020年12月24日 星期四

nginx透過Reserver Proxy到docker grafana設定

grafana預設跑在3000的port上

要讓nginx可以upstream到grafana上

並不能只是在nginx上設定

grafana的init設定檔 也需要對應設定


為了讓我們方便管理

可以透過 ansible 將本機準備好的grafana.ini丟到遠端主機上

再透過docker volumn對應 將這ini檔案 對應到container內設定檔的位置

docker-compose 設定

version: '3.8'
services:
  grafana:
    image: grafana/grafana
    container_name: grafana99
    restart: always
    volumes:
        - grafana_data:/var/lib/grafana
        - /home/ozzy/docker_share/monitor/grafana.ini:/etc/grafana/grafana.ini:ro
    environment:
      - GF_SECURITY_ADMIN_PASSWORD=xxxx
    depends_on:
      - prometheus
    ports:
      - '3000:3000'

grafana.ini設定

instance_name = ozzysun.com
protocol = http
http_port = 3000
domain = ozzysun.com
enforce_domain = true
root_url = http://ozzysun.com/grafana
serve_from_sub_path = true
nginx端設定

location /grafana/ {
    proxy_pass http://192.168.0.99:3000;
    proxy_set_header Host       $http_host;
    proxy_set_header X-Real-IP    $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}

test

2020年8月15日 星期六

nginx 使用return 與proxy_pass的差異

最近在做官網的移轉

舊的主機系統為Window的架構

新的主機則是Linux Docker架構

官網domain移轉後 原本有跑一些.net aspx的服務

就透過nginx轉回舊站上


轉回去是要用return 301 轉址還是用proxy_pass轉呢?

先說結論

如果是會經過瀏覽器顯示的網頁 使用return

如果是程式內執行的api使用proxy_pass

譬如說 www網站要移轉

我們把www給了新的主機, 舊的主機改用old 這網址

因此我們需要在新的主機上 把部分的www轉回old上


在新主機上使用return 網址上看到的網址會是old

如果程式內呼叫的api是透過return轉的

那麼程式內會先收到301 code而發生錯誤 而非你想像的

轉址後的api所產生的結果


而網頁的部分應該是透過browser呈現的

在收到 301 或307 都會自動轉到新的網址上

並不會出錯


在新主機上使用proxy_pass 看到的網址還是www 並不會因為內容是轉回old而顯示old

但是如果網頁的部分也使用proxy_pass 當然還是可以運作

但是每個連結就都會再經過新主機的nginx再轉過一次


另外透過proxy_pass 到old的domain上 是在主機內部運作

有可能發生不認得old這個domain 只要加上resolve dns就可以了

ex

location ~* .(php)$ {

  resolver 8.8.8.8 valid=30s;

  proxy_set_header Host $host;

  proxy_pass https://old.com$request_uri;

}


至於轉址的部分 透過$request_uri就可以取得host後面的完整網址

$args則是取得?後面的query參數

注意的是如果使用$request_uri 就不需要$args

ex: https://old.com/hello/me?name=oz&tel=123

$request_uri = /hello/me?name=oz&tel=123

$args = name=oz&tel=123


2020年8月9日 星期日

nginx 設定檔讀取與ansible安裝範例

在安裝好nginx 可以看到/etc/nginx下包含了
nginx.conf
conf.d/
sites-enabled/
sites-available/
幾個目錄
通常我們做異動修改的都會是sites-available/下
檢視一下幾個目錄之間的關係
nginx讀取的設定檔入口是nginx.conf檔案
可以看到包含了
include /etc/nginx/conf.d/*.conf;
include /etc/nginx/sites-enabled/*;
也就是說預設會去讀讀目錄是在sites-enabled
而在sites-enabled目錄下看到只有一個default的檔案

實際運作的方式
可以sites-available/ 下建立default.conf
然後把default.conf 做symblelink到sites-enabled/default
就可以
以 ansible做nginx的設定與安裝範例如下

---
- name: Install host nginx
  hosts: all
  become: yes
  tasks:
    - name: ensure nginx is at the latest version
      apt: name=nginx state=latest
    - name: start nginx
      service:
        name: nginx
        state: started
    - name: copy the nginx main config
      copy:
        src: ../../files/nginx/default.conf
        dest: /etc/nginx/sites-available/default.conf
    - name: remove old nginx conf
      file:
        path: /etc/nginx/sites-available/conf
        state: absent
    - name: copy conf folder to sites-available
      copy:
        src: ../../files/nginx/conf
        dest: /etc/nginx/sites-available
    - name: create symlink
      file:
        src: /etc/nginx/sites-available/default.conf
        dest: /etc/nginx/sites-enabled/default
        state: link
    - name: restart nginx
      service:
        name: nginx
        state: restarted

2020年8月8日 星期六

nginx: [emerg] bind() to 0.0.0.0:80 failed (98: Address already in use

原本將nginx以docker部署

調整改成用ansible部署到主機上

安裝啟動一直發生錯誤

/etc/nginx目錄下的檔案不齊全

還有在/run/下找不到nginx.pid

報錯為

nginx: [emerg] bind() to 0.0.0.0:80 failed (98: Address already in use

這是個低級錯誤

就是80 port已經被佔用

乾淨移除nginx的部分

可以執行以下指令

sudo apt-get remove nginx nginx-common

sudo apt-get purge nginx nginx-common

sudo apt-get autoremove


查看是哪個程序佔用了80 port

netstat -anp |grep 80


查看才發現原本被停用 docker container nginx 在開機時被啟用

把80port佔住了 才發生在主機上無法安裝nginx的錯誤

停掉container 就一切正常了


2020年7月24日 星期五

docker nginx container使用注意事項

通常使用nginx container 會將設定檔的部份
還有html的部份mount到主機host
方便異動檔案
以下是一些與平常使用nginx的差異注意的部份
1.upstream到本機host上的其他服務
原本的upstream server 設定只要設定
upstream myapi_srv{
  ip_hash;
  server localhost:12347;
}
當是使用container時
不要使用127.0.0.1或localhost這會是指到container內
需改為指到本機host所在的ip上
upstream api_srv01{
  ip_hash;
  server 192.168.0.195:12347;
}


2.alias設定檔案路徑
將host的myFlder目錄 mount到container下的/usr/share/nginx/html
-v ~/myFolder:/usr/share/nginx/html
原本alias到實體檔案所在位置 ~/myFolder/www
location /test {
  alias ~/myFolder/www;
}
nginx container則需改設定
location /test {
  alias /usr/share/nginx/html/www;
}

4.nginx.pid位置
pid檔的位置要查nginx.conf 內的設定路徑

2020年6月30日 星期二

docker nginx 時間不同步

docker nginx 時間不同步
通常nginx上時區的設定只需要加上
autoindex_localtime on;
即可使用到local的timezone
但在container內是無效的
需要讓container與host也就是安裝docker本身的主機環境時間同步
可以在啟動時加上
v /etc/localtime:/etc/localtime:ro
完整的啟動指令範例如下
docker run --name=mynginx -d 
-v /etc/localtime:/etc/localtime:ro 
-v ~/myhtmlfolder:/usr/share/nginx/html 
-v ~/docker_share/nginx/conf:/etc/nginx/conf.d
-v ~/docker_share/nginx/nginx.conf:/etc/nginx/nginx.conf:ro 
-v ~/docker_share/nginx/logs:/var/log/nginx 
-p 80:80 nginx

mac上時區設定localtime無效須改用時區設定

docker run --name=mynginx -d 
-e "TZ=Asia/Taipei" 
-v ~/docker_share/nginx/nginx.conf:/etc/nginx/nginx.conf:ro 
-v ~/bcc:/usr/share/nginx/html 
-v ~/docker_share/nginx/conf:/etc/nginx/conf.d
-v ~/docker_share/nginx/nginx.conf:/etc/nginx/nginx.conf:ro
-v ~/docker_share/nginx/logs:/var/log/nginx -p 80:80 nginx

2020年4月24日 星期五

安裝與設定使用 nginx docker

利用nginx docker取代在系統內安裝的nginx
1.基本docker指令

docker images 察看本機已下載的image
docker container list 察看本機上已經建立的container
docker ps 列出正在運行的container
docker stop containerID 停止container運作
docker container rm containerId 刪除container
docker image rm imageName 刪除image

2.初始安裝nginx
docker run --name=mynginx nginx -p 3838:80
  以nginx這個image安裝 命名為mynginx的container
  並將docker內部的80 port 對應到外部(host)使用的3838 port
  若本機並不存在nginx image會自動由網路下載安裝

3.進入nginx container 察看目錄
docker exec -it mynginx bash
  進入container 內察看設定檔的目錄準備用來對應到本機目錄使用
  查到nginx目錄在container內的
  /etc/nginx
  www根目錄在
  /usr/share/nginx/html

4.將nginx 設定檔與html目錄對應到本機上
  在本機上建立目錄用來對應
  ~/docker_share/nginx/html 對應html目錄
  ~/docker_share/nginx/conf 對應nginx設定檔
  設定nginx.conf單一檔案的對應需要使用:ro readyonly模式
  重新建立 container
docker run --name=mynginx -d -v ~/docker_share/nginx/html:/usr/share/nginx/html 
  -v ~/docker_share/nginx/conf:/etc/nginx/conf.d -v ~/docker_share/nginx/nginx.conf:/etc/nginx/nginx.conf:ro
  -p 3388:80 nginx
  若原container已存在可停止刪除再安裝

5.重啟nginx
  重啟nginx 的指令為 nginx -s reload
  可透過exec指令執行container內部指令
docker exec -d mynginx nginx -s reload
  當然也可以透過
  docker exec -it mynginx bash 直接開shell進入container
  再執行
  nginx -s reload


2019年11月29日 星期五

nginx 設定提供不同版本api使用

目前提供給外部使用的API Server均透過nginx
以 location /api proxy到 nodejs 的服務上
為了要提供全新架構的api 服務
將以v1,v2區分新舊版本server
以下是nginxg上設定範例

location ^~ /api {
        rewrite ^/api(/.*)$ $1 break;
        #若要改預設主機 改這裡即可
        proxy_pass http://api_server_v1;
}
location ^~ /api/v1 {
        rewrite ^/api/v1(/.*)$ $1 break;
        proxy_pass http://api_server_v1;
}

location ^~ /api/v2 {
        rewrite ^/api/v2(/.*)$ $1 break;
        proxy_pass http://api_server_v2;
}
upstream api_server_v1 {
        server 127.0.0.1:12345;
}
upstream api_server_v2 {
        server 127.0.0.1:3138;
}

設定的結果
http://localhost/api/xxx 會導到v1主機
http://localhost/api/v1/xxx 會導到v1主機
http://localhost/api/v2/xxx 會導到v2主機

2017年10月1日 星期日

修正nginx upstream後無法取得真正client ip

把nodejs服務放在nginx後面用upstream來跑
發現要取得client real ip常常都是取到127.0.0.1
修正方式
1.nginx設定
  在locate 區塊加上
  proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
2.ndojs用
  使用 req.headers['x-forwarded-for'] 取得client ip