q528 发表于 2017-12-23 17:41:30

【精选】Nginx负载均衡学习笔记(一)实现HTTP负载均衡和TCP负载均衡(官方和OpenResty两种负载配置)

  说明:很简单一个在HTTP模块中,而另外一个和HTTP 是并列的Stream模块(Nginx 1.9.0 支持)

一、两个模块的最简单配置如下

1、HTTP负载均衡:
  

http {  include       mime.types;
  default_typeapplication
/octet-stream;  upstream live_node {
  server
127.0.0.1:8089;  server
127.0.0.1:8088;  }
  

  server {
  listen
80;  server_namelocalhost;
  location
/ {  
        proxy_pass http://live_node;
  }
  }
  server {
  listen
8088;  server_namelocalhost;
  location
/ {  root   
/usr/local/nginx/html2;  indexindex.html index.htm;
  }
  }
  

  server {
  listen
8089;  server_namelocalhost;
  location
/ {  root   
/usr/local/nginx/html3;  indexindex.html index.htm;
  }
  }
  
}
  

  以上测试一个浏览器访问80端口,实现访问不同的server。

2、TCP负载均衡:
  

stream {  upstream rtmp {
server 127.0.0.1:8089; # 这里配置成要访问的地址  server
127.0.0.2:1935;  server
127.0.0.3:1935; #需要代理的端口,在这里我代理一一个RTMP模块的接口1935  }
  server {
  listen
1935;# 需要监听的端口  proxy_timeout 20s;
  proxy_pass rtmp;
  }
  
}
  

  以上可以实现一个简单的RTMP流的转发。

二、TCP负载均衡和Http负载均衡的详细解说

1、TCP负载均衡:
  nginx-1.9.0 已发布,该版本增加了 stream 模块用于一般的 TCP 代理和负载均衡,ngx_stream_core_module 这个模块在1.90版本后将被启用。但是并不会默认安装,需要在编译时通过指定 --with-stream 参数来激活这个模块。
  (1)配置Nginx编译文件参数
  

./configure --with-http_stub_status_module --with-stream  

  (2)编译、安装,make,make install .
  (3)配置nginx.conf文件
  

stream {  upstream rtmp {
  server
127.0.0.1:8089; # 这里配置成要访问的地址  server
127.0.0.2:1935;  server
127.0.0.3:1935; #需要代理的端口,在这里我代理一一个RTMP模块的接口1935  }
  server {
  listen
1935;# 需要监听的端口  proxy_timeout 20s;
  proxy_pass rtmp;
  }
  
}
  

  创建最高级别的stream(与http同一级别),定义一个upstream组 名称为rtmp,由多个服务组成达到负载均衡 定义一个服务用来监听TCP连接(如:1935端口),并且把他们代理到一个upstream组的rtmp中,配置负载均衡的方法和参数为每个server;配置些如:连接数、权重等等。
  首先创建一个server组,用来作为TCP负载均衡组。定义一个upstream块在stream上下文中,在这个块里面添加由server命令定义的server,指定他的IP地址和主机名(能够被解析成多地址的主机名)和端口号。下面的例子是建立一个被称之为rtmp组,两个监听1395端口的server ,一个监听8089端口的server。
  

upstream rtmp {  server
127.0.0.1:8089; # 这里配置成要访问的地址  server
127.0.0.2:1935;  server
127.0.0.3:1935; #需要代理的端口,在这里我代理一一个RTMP模块的接口1935  }
  

  注意:你不能为每个server定义协议,因为这个stream命令建立TCP作为整个 server的协议了。
  配置反向代理使Nginx能够把TCP请求从一个客户端转发到负载均衡组中(如:rtmp组)。在每个server配置块中 通过每个虚拟server的server的配置信息和在每个server中定义的监听端口(客户端需求的代理端口号,如我推流的的是RTMP协议,则端口号为:1935)的配置信息和proxy_passs 命令把TCP通信发送到upstream的哪个server中去。下面我们将TCP通信发送到rtmp 组中去。
  

server {  listen
1935;# 需要监听的端口  proxy_timeout 20s;
  proxy_pass rtmp;
  }
  

  当然我们也可以采用单一的代理方式:
  

server {  listen
1935;# 需要监听的端口  proxy_timeout 20s;
  proxy_pass
127.0.0.3:1935; #需要代理的端口,在这里我代理一一个RTMP模块的接口1935  }
  

  (4)改变负载均衡的方法:
  默认nginx是通过轮询算法来进行负载均衡的通信的。引导这个请求循环的到配置在upstream组中server端口上去。 因为他是默认的方法,这里没有轮询命令,只是简单的创建一个upstream配置组在这儿stream山下文中,而且在其中添加server。
  1、least-connected :对于每个请求,nginx plus选择当前连接数最少的server来处理:
  

 upstream rtmp {  
     least_conn;
  server
127.0.0.1:8089; # 这里配置成要访问的地址  server
127.0.0.2:1935;  server
127.0.0.3:1935; #需要代理的端口,在这里我代理一一个RTMP模块的接口1935  }
  

  2、least time :对于每个链接,nginx pluns 通过几点来选择server的: 最底平均延时:通过包含在least_time命令中指定的参数计算出来的:


[*]connect:连接到一个server所花的时间
[*]first_byte:接收到第一个字节的时间
[*]last_byte:全部接收完了的时间 最少活跃的连接数:
  

 upstream rtmp {  
    least_time first_byte;
  server
127.0.0.1:8089; # 这里配置成要访问的地址  server
127.0.0.2:1935;  server
127.0.0.3:1935; #需要代理的端口,在这里我代理一一个RTMP模块的接口1935  }
  

  3、普通的hash算法:nginx plus选择这个server是通过user_defined 关键字,就是IP地址:$remote_addr;
  

  upstream rtmp {  hash $remote_addr consistent;
  server
127.0.0.1:8089; # 这里配置成要访问的地址  server
127.0.0.2:1935;  server
127.0.0.3:1935; #需要代理的端口,在这里我代理一一个RTMP模块的接口1935  }
  


2、HTTP负载均衡:
  参考文章:
  http://freeloda.blog.51cto.com/2033581/1288553

=========================Ubuntu14.0 平台安装OpenResty1.11.2.1============================
  下载安装LusJIT:LuaJIT-2.0.4
  (更多版本下载地址:http://luajit.org/download.html)
  

wgethttp://luajit.org/download/LuaJIT-2.0.4.tar.gz  
tar -zxvfLuaJIT-2.0.4.tar.gz
  
make
&& sudo make install  

  编译


  出现以上表示编译成功
  安装

  可以看出安装完成后给了一个软连接到 /usr/local/bin/luajit 下
  OpenResty编译或运行时所需要的软件包
  

apt-get install libreadline-dev libncurses5-dev libpcre3-dev \  libssl-dev perl make build-essential
  


OpenResty 安装
  1、去openresty 的github上下载一个版本 https://github.com/openresty/lua-nginx-module/releases
  

wget https://openresty.org/download/openresty-1.11.2.1.tar.gz  

  2、解压源码包,tar xzvf ngx_openresty-1.9.7.1.tar.gz。若你下载的源码包版本不一样,将相应的版本号改为你所下载的即可。
  3、切换工作目录到 cd ngx_openresty-1.9.7.1。
  4、了解默认激活的组件。OpenResty 官网有组件列表,我们可以参考,列表中大部分组件默认激活,也有部分默认不激活。 默认不激活的组件,我们可以在编译的时激活,后面步骤详说明
  5、绝大部分组件已内置在OpenResty安装包中,但也有一部分不包含在内默认并未启用
  标准 Lua 5.1 解释器、Drizzle Nginx 模块、 Postgres Nginx 模块 以及 Iconv Nginx 模块 默认并未启用,以下为分别编译选项来开启它们
  

--with-lua51  --with-http_drizzle_module
  --with-http_postgres_module
  --with-http_iconv_module
  

  6、使用选项 --with-Components 激活组件,--without 则是禁止组件。 你可以根据自己实际需要选择 with 或 without。
  如下命令,OpenResty 将配置安装在 /opt/openresty 目录下(注意使用 root 用户),并激活luajit、http_iconv_module 并禁止 http_redis2_module 组件。检测配置文件信息
  sudo ./configure \
  --prefix=/opt/openresty \
  --with-lua51 --with-http_drizzle_module --with-
  luajit --without-http_redis2_module --with-http_iconv_module --with-stream --with-

  http_stub_status_module --with-http_xslt_module --with-stream_ssl_module --with-

  http_realip_module --with-http_ssl_module --add-module=../stream-lua-nginx-module-

  0.0.1/ --add-module=../nginx-rtmp-module-1.1.11/
  提示错误:./configure: error: the ngx_drizzle addon requires the libdrizzle library.
  解决办法:
  

http://openresty.org/download/drizzle7-2011.07.21.tar.gz  
tar xzvf drizzle7-2011.07.21.tar.gz
  
cd drizzle7-2011.07.21/
  
./configure --without-server
  
make libdrizzle-1.0
  
make install-libdrizzle-1.0
  

  提示错误:./configure: error: the HTTP XSLT module requires the libxml2/libxslt
  解决办法:
  

sudo apt-get install libxml2 libxml2-dev libxslt-dev  
sudo apt
-get install libgd2-xpm libgd2-xpm-dev  

  7、在上一步中,最后没有什么 error 的提示就是最好的。若有错误,最后会显示 具体原因可以看源码包目录下的 build/nginx-VERSION/objs/autoconf.err文件查看。若没有错误,则会出现如下信息:

  8、编译:根据上一步命令提示,输入gmake

  9、安装:输入gmake install

  10、设置环境变量(我这里没有做)
  为了后面启动 OpenResty 的命令简单一些,不用在 OpenResty 的安装目录下进行启动,我们设置环境变量来简化操作。 将 nginx 目录添加到 PATH 中。打开文件 /etc/profile, 在文件末尾加入export PATH=$PATH:/opt/openresty/nginx/sbin,若你的安装目录不一样,则做相应修改。 注意:这一步操作需要重新加载环境变量才会生效,可通过命令source /etc/profile或者重启服务器等方式实现。
  

/etc/profile   是所有用户的环境变量  

/etc/enviroment  是系统的环境变量  登陆系统时shell读取的顺序应该是
  /etc/profile ->/etc/enviroment -->$HOME/.profile   -->$HOME/.env
  

  编译完之后做了一个软连接哦
  

mkdir -p /opt/openresty/site/lualib  
ln
-sf /opt/openresty/nginx/sbin/nginx /opt/openresty/bin/openresty  

  所有启动Nginx的方式可以有两种方式:
  

软连接开启:/opt/openresty/bin/openresty  

原始地址开启:/opt/openresty/nginx/sbin/nginx  

  查看编译后的结果:
  

root@iZbp16w4fwm1sxrjd98oe0Z:/home/www/tinywan_bak/openresty-1.11.2.1# /opt/openresty/bin/openresty -V  
nginx version: openresty
/1.11.2.1  
built by gcc
4.8.2 (Ubuntu 4.8.2-19ubuntu1)  
built with OpenSSL
1.0.1f 6 Jan 2014  
TLS SNI support enabled
  
configure arguments:
--prefix=/opt/openresty/nginx --with-cc-opt=-O2  --add-module=../ngx_devel_kit-0.3.0
  --add-module=../iconv-nginx-module-0.14
  --add-module=../echo-nginx-module-0.60
  --add-module=../xss-nginx-module-0.05
  --add-module=../ngx_coolkit-0.2rc3
  --add-module=../set-misc-nginx-module-0.31
  --add-module=../form-input-nginx-module-0.12
  --add-module=../encrypted-session-nginx-module-0.06
  --add-module=../srcache-nginx-module-0.31
  --add-module=../ngx_lua-0.10.6
  --add-module=../ngx_lua_upstream-0.06
  --add-module=../headers-more-nginx-module-0.31
  --add-module=../array-var-nginx-module-0.05
  --add-module=../memc-nginx-module-0.17
  --add-module=../redis-nginx-module-0.3.7
  --add-module=../rds-json-nginx-module-0.14
  --add-module=../rds-csv-nginx-module-0.07
  --with-ld-opt=-Wl,-rpath,/opt/openresty/luajit/lib
  --with-stream --with-stream_ssl_module
  --with-http_ssl_module
  --add-module=/home/www/tinywan_bak/openresty-1.11.2.1/../stream-lua-nginx-module
  

  浏览器访问,安装成功:

  Nginx.conf
  

#TCP 负载均衡  
stream {
  server {
  listen
1234;#proxy_timeout 20s;#proxy_pass backend;  content_by_lua_block {
  ngx.say(
"HelloWorld")  }
  }
  
}
  

  【1】通过命令telnet 命令测试TCP负载server
  

root@iZbp16w4fwm1sxrjd98oe0Z:/opt/openresty/nginx/sbin# telnet 127.0.0.1 1234  
Trying
127.0.0.1...  
Connected to
127.0.0.1.  
Escape character is
'^]'.  
HelloWorld
  
Connection closed by foreign host.
  

  【2】CURL测试结果!

  【3】Windows 客户端测试结果:
  
  注意,以上127.0.0.1 要换成你openresty服务器地址!!!
  Linux开始、停止、重新加载


[*]开始:./nginx
[*]停止:./nginx -s stop
重置:./nginx -s>
TCP(4层协议) 负载均衡可以的!!!!!!!!!!!!!!!!!!!!!
  

stream {  upstream rtmp {
  server
127.0.0.1:8089; # 这里配置成要访问的地址  server
127.0.0.2:1935;  server
127.0.0.3:1935; #需要代理的端口,在这里我代理一一个RTMP模块的接口1935  }
  server {
  listen
1935;# 需要监听的端口  

  content_by_lua_block {
  ngx.say("Hello, Lua!")
  }
  

      proxy_timeout 20s;  proxy_pass rtmp;
  }
  
}
  
页: [1]
查看完整版本: 【精选】Nginx负载均衡学习笔记(一)实现HTTP负载均衡和TCP负载均衡(官方和OpenResty两种负载配置)