cncml手绘网

标题: Nginx服务器作反向代理实现内部局域网的url转发配置 [打印本页]

作者: admin    时间: 2020-2-25 04:54
标题: Nginx服务器作反向代理实现内部局域网的url转发配置
情景 由于公司内网有多台服务器的http服务要映射到公司外网静态IP,如果用路由的端口映射来做,就只能一台内网服务器的80端口映射到外网80端口,其他服务器的80端口只能映射到外网的非80端口。非80端口的映射在访问的时候要域名加上端口,比较麻烦。并且公司入口路由最多只能做20个端口映射。肯定以后不够用。 然后k兄就提议可以在内网搭建个nginx反向代理服务器,将nginx反向代理服务器的80映射到外网IP的80,这样指向到公司外网IP的域名的HTTP请求就会发送到nginx反向代理服务器,利用nginx反向代理将不同域名的请求转发给内网不同机器的端口,就起到了“根据域名自动转发到相应服务器的特定端口”的效果,而路由器的端口映射做到的只是“根据不同端口自动转发到相应服务器的特定端口”,真是喜大普奔啊。 涉及的知识:nginx编译安装,nginx反向代理基本配置,路由端口映射知识,还有网络域名等常识。 本次实验目标是做到:在浏览器中输入xxx123.tk能访问到内网机器192.168.10.38的3000端口,输入xxx456.tk能访问到内网机器192.168.10.40的80端口。 配置步骤 服务器ubuntu 12.04
% o- D* n6 [0 `9 Q3 f+ O
5 Q2 [1 T4 Q5 D. H# i
  1. ###更新仓库
    6 J. }8 z/ R3 f  \8 [( d0 H3 w

  2. / p3 R1 U6 M' ]+ I) v5 d& N4 b; U9 N% h
  3. apt-get update -y
    : g3 d' n7 h. I. U8 F( W
  4. apt-get install wget -y
    # d8 v6 c* C  ~1 U+ Z2 L
  5. #下载nginx和相关软件包
复制代码
+ K- N" k. n# e8 g/ V
7 Y6 W( H$ R& M% b+ u
pcre是为了编译rewrite模块,zlib是为了支持gzip功能。额,这里nginx版本有点旧,因为我还要做升级nginx的实验用。大家可以装新版本。0 M& Z5 @* l( A4 a" \& s7 G
+ l* S9 y; x' ?1 ^: Q' |
  1. cd /usr/local/src: N3 M2 ?/ q0 i$ l% m: ~, l
  2. wget <a href="ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.33.tar.gz">ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.33.tar.gz</a>
    0 F* m+ t: Q% h3 y
  3. wget <a href="http://zlib.net/zlib-1.2.8.tar.gz">http://zlib.net/zlib-1.2.8.tar.gz</a>
    3 R- d3 U0 G; K7 \
  4. wget <a href="http://nginx.org/download/nginx-1.4.2.tar.gz">http://nginx.org/download/nginx-1.4.2.tar.gz</a>, _9 X* D/ S  Q) W! n
  5. tar xf pcre-8.33.tar.gz4 h: L/ f6 ]. P& k2 ]1 f4 F( R
  6. tar xf zlib-1.2.8.tar.gz
    , O" y- t5 d4 z# b" y  A8 K
  7. #安装编译环境( I0 |/ V: J1 J! d5 M" i1 P
复制代码

9 V' r. B0 u( T* Y9 Q2 p, z
9 k# e0 b% A) d2 k2 Y& c; T4 ] apt-get install build-essential libtool -y
; ]8 `  o% c) a0 N! I4 r. n4 c#创建nginx用户
' J% j" A0 P7 x: S
$ s$ v, R3 I2 I0 i所谓的unprivileged user
! G5 j  V7 A, U: r# C* `0 ^8 s+ r/ g9 m  m
  1. useradd -s /bin/false -r -M -d /nonexistent www4 z. p/ C: @8 f- H
  2. #开始编译安装. k' a1 n+ I, H! C- ], Q: W# U* H9 g

  3. # M& i, {8 s& m2 \- ], e
  4. /configure --with-pcre=/usr/local/src/pcre-8.33 --with-zlib=/usr/local/src/zlib-1.2.8 --user=www --group=www \
    4 W5 b$ Z" i, k7 r; X' l4 O
  5. --with-http_stub_status_module --with-http_ssl_module --with-http_realip_module
    % j/ e0 j3 V+ _3 u$ B
  6. make
    8 ~, [8 w3 y& r' K
  7. make install9 F9 Y0 q5 v, J7 b; ?4 k
  8. #给文件夹授权
复制代码

3 R, X( d  m' }$ R  n) @ + Q9 l: x. q4 ^# Y  @
chown -R www:www /usr/local/nginx
8 l0 r$ ]4 w+ |! D#修改配置文件
" B& |8 C7 |% \* a' u, I2 Bvim nginx.conf
, o! O! j8 u  v# [2 {2 k2 L8 U# h& X* N6 ?& [, j) |' u7 S
user www www;
0 a9 W1 v6 @; uworker_processes 1;% y1 D( K" [& [/ I7 B) W
error_log logs/error.log;! Y; @) ]6 W6 t. w4 T+ _% E
pid logs/nginx.pid;; n* ~" _; r' K5 D* t
worker_rlimit_nofile 65535;
9 S* d6 m0 L( F7 l0 ^/ R3 Aevents {& g/ H1 o0 k. b  ]5 a/ S
  use epoll;
5 H. d1 h; h$ @: J0 H6 |3 {  worker_connections 65535;
, o7 I" s( x4 J( Y}; X# q: V1 X* c5 e& y0 i
http {
' ]0 b$ i$ i3 C3 T8 |/ g0 r9 r$ M  include mime.types;
6 G8 ?6 x3 \7 F9 H! {& L  default_type application/octet-stream;
' j' B% c2 L8 e3 S  include /usr/local/nginx/conf/reverse-proxy.conf;& t/ ]( Y& e2 P. ?& }0 J9 U
  sendfile on;' Q6 {# E" g& `
  keepalive_timeout 65;. _5 h0 _, c' L3 t
  gzip on;3 S' m+ E1 |0 W7 B
  client_max_body_size 50m; #缓冲区代理缓冲用户端请求的最大字节数,可以理解为保存到本地再传给用户$ S: L* M# E" s8 u+ ]1 P; Q
  client_body_buffer_size 256k;6 G/ U, g3 c* ]( D7 p/ p# v- P
  client_header_timeout 3m;2 m( y0 V/ p9 R" G) a4 u' h
  client_body_timeout 3m;
- T+ C. a- Y, W- O1 ^  send_timeout 3m;
; P( m" Z' E: B. j; y0 j3 h  proxy_connect_timeout 300s; #nginx跟后端服务器连接超时时间(代理连接超时)
! R5 Q8 V1 Z9 p4 Z2 `  proxy_read_timeout 300s; #连接成功后,后端服务器响应时间(代理接收超时)
' |: q8 B5 g. v4 m& K& B2 `0 W  proxy_send_timeout 300s;$ n; I& J' o, m1 {
  proxy_buffer_size 64k; #设置代理服务器(nginx)保存用户头信息的缓冲区大小& u0 G7 l+ c# U5 }% ~( r5 Z' s) e$ B& L
  proxy_buffers 4 32k; #proxy_buffers缓冲区,网页平均在32k以下的话,这样设置( Q  \0 Y% r- `  r
  proxy_busy_buffers_size 64k; #高负荷下缓冲大小(proxy_buffers*2)
; i+ k7 g( R6 b* x. ?3 t0 B* U  proxy_temp_file_write_size 64k; #设定缓存文件夹大小,大于这个值,将从upstream服务器传递请求,而不缓冲到磁盘
4 a7 e$ k# `" b3 H$ Q; s  proxy_ignore_client_abort on; #不允许代理端主动关闭连接4 y; T% j" p8 q6 q. c
  server {$ L: a4 v6 I+ Z( x  g. g
    listen 80;' r. k) ?1 h- Q+ N$ ?- S
    server_name localhost;2 K3 \7 L' H# R) g" I. ?- a  q- B4 o
    location / {
9 `- a! B5 ?) |      root html;
  `6 T* K: J8 m4 K8 Q. [9 j( E      index index.html index.htm;# V! t  q* `6 W- h. X
    }
- Q- s4 }$ _3 h    error_page 500 502 503 504 /50x.html;
! ?5 _: A2 L3 D8 b* ~    location = /50x.html {5 {6 t; l# t/ k' ]4 \4 L
      root html;& K4 }! Z' Z* P* N$ s7 m' i
    }
: R- N) Z+ o5 B4 g4 }  }/ k  g/ k3 {& I8 Y* e# J5 B
}% K( z4 h+ X1 G0 P4 }
# r3 _& ~' {( r/ _5 K' u- f$ z
编辑反向代理服务器配置文件:
& f6 A+ ]- W. p: {1 P  j
# E* M1 u4 p/ `vim /usr/local/nginx/conf/reverse-proxy.conf( k& c, R( H6 I, l

3 e: R/ J+ s+ q- A  ~# H. Wserver1 V* e9 c8 g* E1 j) b
{
3 k+ Q( n6 J6 Z  listen 80;
+ k+ ]% M. ^1 ^7 g/ F/ Z' M  server_name xxx123.tk;
: _# v! H6 n6 |  location / {
( N5 E  r5 ~6 o    proxy_redirect off;  M* I' ~+ D' {" [
    proxy_set_header Host $host;9 D5 \$ e; ?: z: @) O3 j
    proxy_set_header X-Real-IP $remote_addr;/ F- x& l" N6 a& v- k
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
4 t3 S* X1 K  j. p! M    proxy_pass http://192.168.10.38:3000;
" `' j9 w/ E1 c7 H! p, A4 s  }
$ d* w% f# _3 H5 Y9 C: J3 o  t  access_log logs/xxx123.tk_access.log;
, g! i, M+ v8 f$ U6 h: v1 L}
! t  N% E! [8 o' {/ ]  9 G* x' @0 H/ T9 {6 w/ c7 m
server, v& U! j% l& J
{
5 S4 a* V2 e5 h  listen 80;( x3 f8 H! K4 t
  server_name xxx456.tk;
4 x4 ~; q8 Z% E! I  location / {8 g& W* b: k9 P) n- z
    proxy_redirect off;
) ~% y3 F; |! m0 G  w    proxy_set_header Host $host;& j1 N' Z% r6 C* a, c
    proxy_set_header X-Real-IP $remote_addr;
4 ^& k' s- ?3 p' p8 w' z# [    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
  Z$ t0 [' U$ X" a0 K5 o" d; R, X    proxy_pass http://192.168.10.40:80;6 p: U0 a5 B4 h! y* D& S* h
  }
/ R& z& N/ u5 \; G  access_log logs/xxx456.tk_access.log;
1 z8 |! J& w1 n1 j6 B9 s4 {9 ^6 ]}
% q) q" {; E' \7 H( v
3 f6 Y/ E! m; X% X3 K/ m. i然后重新加载nginx配置文件,使之修改生效,再把xxx123.tk域名指向公司静态IP,这样就成功的做到了在浏览器中输入xxx123.tk的时候访问的内网服务器192.168.10.38的3000端口,输入xxx456.tk访问192.168.10.40的80端口的作用。 如果想对后端机器做负载均衡,像下面这配置就可以把对nagios.xxx123.tk的请求分发给内网的131和132这两台机器做负载均衡了。
+ ]2 A6 e7 w, `. d8 ]) ]& k: ~0 ]7 m  L0 F/ C. h0 l$ Z* A8 H
upstream monitor_server {( f6 }" U8 Z/ M9 t
  server 192.168.0.131:80;% X- F6 Y! ^* x7 [# D/ d
    server 192.168.0.132:80;1 F* R, `3 d* x' o7 X- ]3 _! k- M/ m
}
# J9 R9 \$ n  u+ O1 K; P  & Q, o1 p) N8 c; I3 y
server
" |8 k# x; p* k" I' q4 W{
) V% v1 D! \, j! C  listen 80;+ e* F' g! @6 v( `: o
  server_name nagios.xxx123.tk;
# H6 B+ U2 W! G' t5 H' k- ]6 G  location / {1 t4 {: n) @! f) P- c$ P( {
    proxy_redirect off;
$ P! R1 O* }" e" X    proxy_set_header Host $host;
! z7 s3 t% A" K' w. \2 B    proxy_set_header X-Real-IP $remote_addr;
  v. p3 i, Y8 e2 N    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
$ G4 X  ]5 v- [/ u1 e$ p% v7 f7 A7 k    proxy_pass http://monitor_server;
3 s* i" y) A- o! [6 |  }& I" @4 F9 e, _0 }7 R2 {
  access_log logs/nagios.xxx123.tk_access.log;, H+ E" l5 F$ i6 S. r! y
}: f. Z8 @' L% A
$ X; R  R+ Q5 O: c% F: }0 n
额,关于负载均衡和缓存就不多说了,这里只是要起到一个简单的“域名转发”功能。 另外,由于http请求最后都是由反向代理服务器传递给后段的机器,所以后端的机器原来的访问日志记录的访问IP都是反向代理服务器的IP。 要想能记录真实IP,需要修改后端机器的日志格式,这里假设后端也是一台nginx: 在后端配置文件里面加入这一段即可:- S! _9 X; |9 a0 g9 @# ~3 r
! ?6 f0 l# l( i, H# e: O) }5 b
log_format access '$HTTP_X_REAL_IP - $remote_user [$time_local] "$request" '
9 ^" M0 w  L# K3 c$ X'$status $body_bytes_sent "$http_referer" '
/ S3 E$ i; H( n% x* g( c'"$http_user_agent" $HTTP_X_Forwarded_For';+ V$ T8 P+ H0 N3 a7 N
  ; q$ L2 I* F# [7 G
access_log logs/access.log access;+ A; ~5 d! S- Q& V
8 X# l6 y5 Q( M; `0 v
再看看原来日志的格式长什么样:
# E3 \. P/ @& j7 S/ P  z% O& H- K$ z* t9 }! ]4 ]
14 T" e( n, p* ~: u
2! u1 y" J. J1 J) X
3
& _3 i/ w) ?! K1 @. r42 Y& R" \- U0 R; e. v* A. q- n- O
5' s" E+ p5 U8 `( G0 b2 g  H
#log_format main '$remote_addr - $remote_user [$time_local] "$request" '
9 t  G' l' Z  B$ z+ [# '$status $body_bytes_sent "$http_referer" ', c) h7 f# D: U: I$ I
# '"$http_user_agent" "$http_x_forwarded_for"';7 I/ p, U, J/ _. m& a. F
  1 f' ]- z- [: E( ~' _
#access_log logs/access.log main;
9 T' p% q( s: O! ]- x看出区别了吧   遇到的问题   之前没配置下面这段,访问时候偶尔会出现504 gateway timeout,由于偶尔出现,所以不太好排查
9 ^6 |% x4 V; B5 _- [( x1 p$ E$ q  E
3 x# c2 v2 m* P. S, I( ~  s% q, t1
, E, {/ d9 b& S% |2
9 c/ Z7 E" ^! \6 c4 x$ |3
( P2 z' G) m! P; g7 p/ Q47 w7 U# {- M5 t$ F4 M5 X0 T+ h
51 q$ t5 z2 Y& G: S9 F
69 ~: `% @5 K, i1 [
7
$ e' h) R; A( g+ A# N, ^8
( N" h& j5 o! R! k0 Iproxy_connect_timeout 300s;
. S8 i: S# o: w! k  Mproxy_read_timeout 300s;- s9 Y# W) B% |% u+ p3 `
proxy_send_timeout 300s;& m& u6 `( x3 r+ j9 b2 A! g$ n
proxy_buffer_size 64k;
. s% f2 U% ]! `1 s4 s  P! pproxy_buffers 4 32k;
# g( u+ N  m8 Aproxy_busy_buffers_size 64k;& J* c* V7 L3 e, f. T" G
proxy_temp_file_write_size 64k;
/ E9 \  Y- }$ w  n- Pproxy_ignore_client_abort on;3 ]/ |% v0 Y. N4 v
报错日志:" T5 u* ~( w& @
+ Q, W& Z, V2 h6 P6 Y1 Y
...upstream timed out (110: Connection timed out) while reading response header from upstream, client: ...(后面的省略) 从日志看来是连接超时了,网上一通乱查之后估计可能是后端服务器响应超时了,本着大胆假设,小心求证的原则,既然假设了错误原因就要做实验重现错误:那就调整代理超时参数,反过来把代理超时阀值设小(比如1ms)看会不会次次出现504。后来发现把proxy_read_timeout 这个参数设置成1ms的时候,每次访问都出现504。于是把这个参数调大,加入上面那段配置,解决问题了。
% Q( |6 p' A1 n/ s( H" O5 J+ d8 [" ~1 [- A& [
PS:关于域名转发
9 w( H/ }" f! y# f; H2 z$ i
" [: i$ }( Y2 q9 z; b所谓域名URL转发,是通过服务器的特殊设置,将访问您当前域名的用户引导到您指定的另一个网络地址。 地址转向(也可称“URL转发”)即将一个域名指向到另外一个已存在的站点,英文称为“ URL FORWARDING ”。域名指向可能这个站点原有的域名或网址是比较复杂难记的。 已经注册成功的域名,若初设或取消 URL 转发设置,一般均在 24-48 小时之内生效。对于原有已经设置成功的 URL 转发域名,如果修改 URL 转发的目标地址,则只需 1-2 个小时即可生效。 不隐藏路径 URL 转发:例如: http://b.com/ 指向 http://a.com/xxx/ (任意目录);当在浏览器地址栏中敲入 http://b.com/ 后回车, IE 浏览器的地址栏里显示的地址会由原来您敲入的 http://b.com/ 自动变为显示真正的目标地址 http://a.com/xxx/ ; 隐藏路径的 URL 转发:例如:先同上, IE 浏览器的地址栏里显示的地址保持不变,仍是 http://b.com/ ,但实际访问到的是 http://a.com/xxx/ 的内容。9 t( \$ J: d3 Q+ J9 k





欢迎光临 cncml手绘网 (http://bbs.cncml.com/) Powered by Discuz! X3.2