ICode9
精准搜索请尝试： 精确搜索
首页
编程语言>
数据库
系统相关
互联网
其他分享
Python
Java
JavaScript
android
PHP
首页 > 其他分享> 文章详细

集万千优点于一身的Haproxy集群，你还不了解？

2021-06-20 18:32:24  阅读：170  来源： 互联网

标签：Haproxy haproxy log nginx 集群 服务器 万千 日志


在这里插入图片描述

Haproxy集群

一、Haproxy介绍

1.1 HAProxy是什么？

是一个使用C语言编写的自由及开放源代码软件[1]，其提供高可用性、负载均衡，以及基于TCP和HTTP的应用程序代理。

HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在当前的硬件上，完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中，同时可以保护你的web服务器不被暴露到网络上。 HAProxy实现了一种事件驱动,
单一进程模型，此模型支持非常大的并发连接数。多进程或多线程模型受内存限制
、系统调度器限制以及无处不在的锁限制，很少能处理数千并发连接。事件驱动模型因为在有更好的资源和时间管理的用户空间(User-Space)实现所有这些任务，所以没有这些问题。此模型的弊端是，在多核系统上，这些程序通常扩展性较差。这就是为什么他们必须进行优化以使每个CPU时间片(Cycle)做更多的工作。

包括 GitHub、Bitbucket、StackOverflow、Reddit、Tumblr、Twitter和 Tuenti[7]在内的知名网站，及亚马逊网络服务系统都使用了HAProxy。

1.2 Haproxy的特性

  • 可靠性和稳定性非常好，可以与硬件级的F5负载均衡设备相媲美;
  • 最高可以同时维护40000-50000个并发连接，单位时间内处理的最大请求数为20000个，最大处理能力可达10Git/s;
  • 支持多达8种负载均衡算法，同时也支持会话保持;
  • 支持虚机主机功能，从而实现web负载均衡更加灵活;
  • 支持连接拒绝、全透明代理等独特的功能;
  • 拥有强大的ACL支持，用于访问控制;
  • 其独特的弹性二叉树数据结构，使数据结构的复杂性上升到了0（1），即数据的查寻速度不会随着数据条目的增加而速度有所下降;
  • 支持客户端的keepalive功能，减少客户端与haproxy的多次三次握手导致资源浪费，让多个请求在一个tcp连接中完成;
  • 支持TCP加速，零复制功能，类似于mmap机制;
  • 支持响应池 （response buffering）;
  • 支持RDP协议;
  • 基于源的粘性，类似nginx的ip hash功能，把来自同一客户端的请求在一定时间内始终调度到上游的同一服务器;
  • 更好统计数据接口，其web接口显示后端集群中各个服务器的接收、发送、拒绝、错误等数据的统计信息;
  • 详细的健康状态检测，web接口中有关于对上游服务器的健康检测状态， 并提供了一定的管理功能;
  • 基于流量的健康评估机制;
  • 基于http认证;
  • 基于命令行的管理接口;
  • 日志分析器，可对日志进行分析

1.3 负载均衡策略

HAProxy负载均衡策略非常多，常见的有如下8种∶

  1. roundrobin∶表示简单的轮询。
  2. static-rr∶表示根据权重。
  3. leastconn∶ 表示最少连接者先处理。
  4. source∶ 表示根据请求的源IP，类似Nginx的IP hash机制。
  5. ri∶表示根据请求的URI。
  6. rl_param∶表示根据HTTP请求头来锁定每 一 次HTrTP请求。
  7. rdp-cookie （name）∶表示根据据cookie （name）来锁定并哈希每一次TCP请求。

1.4 LVS、Nainx、HAproxy的区别

  • LVS基于Linux操作系统实现软负载均衡，而HAProxy和Nginx是基于第三方应用实现的软负载均衡;
  • LVS是可实现4层的IP负载均衡技术，无法实现基于目录、URL的转发。而HAProxy和Nainx都可以实现4层和7层技术，HAProxy可提供TCP和HrTP应用的负载均衡综合解决方案
  • LVS因为工作在ISO模型的第四层，其状态监测功能单一， 而HAProxy在状监测方面功能更丰富、强大， 可支持端口、URL、脚本等多种状态检测方式;
  • HAProxy功能强大，但整体性能低于4层模式的LVS 负载均衡。
  • Nginx主要用干Web服务器或缓爱存服务器。

二、Haproxy集群的构建

2.1 Haproxy集群的构建的步骤（理论）

准备工作：

Haproxy服务器：192.168.80.30
Nginx 服务器1：192.168.80.10
Nginx 服务器2：192.168.80.20
客户端：192.168.80.200

1.关闭防火墙，将安装Haproxy所需软件包传到/opt目录下

systemctl stop firewalld
setenforce 0

haproxy-1.5.19.tar.gz

2.编译安装 Haproxy

yum install -y pcre-devel bzip2-devel gcc gcc-c++ make

tar zxvf haproxy-1.5.19.tar.gz
cd haproxy-1.5.19/
make TARGET=linux2628 ARCH=x86_64
make install

---------------------参数说明---------------------------------------------------------------------------
TARGET=linux26 #内核版本，
#使用uname -r查看内核，如：2.6.18-371.el5，此时该参数用TARGET=linux26；kernel大于2.6.28的用TARGET=linux2628

ARCH=x86_64 #系统位数，64位系统

3.Haproxy服务器配置

mkdir /etc/haproxy
cp examples/haproxy.cfg /etc/haproxy/

cd /etc/haproxy/
vim haproxy.cfg

global
--4~5行--修改，配置日志记录，local0为日志设备，默认存放到系统日志
		log /dev/log   local0 info		
        log /dev/log   local0 notice
        #log loghost    local0 info
        maxconn 4096					#最大连接数，需考虑ulimit -n限制
--8行--注释，chroot运行路径，为该服务自设置的根目录，一般需将此行注释掉
        #chroot /usr/share/haproxy
        uid 99							#用户UID
        gid 99							#用户GID
        daemon							#守护进程模式

defaults        
		log     global					#定义日志为global配置中的日志定义
        mode    http					#模式为http
        option  httplog					#采用http日志格式记录日志
        option  dontlognull				#不记录健康检查日志信息
        retries 3						#检查节点服务器失败次数，连续达到三次失败，则认为节点不可用
        redispatch						#当服务器负载很高时，自动结束当前队列处理比较久的连接
        maxconn 2000					#最大连接数
        contimeout      5000			#连接超时时间
        clitimeout      50000			#客户端超时时间
        srvtimeout      50000			#服务器超时时间

--删除下面所有listen项--，添加
listen  webcluster 0.0.0.0:80			#定义一个名为webcluster的应用
        option httpchk GET /test.html	#检查服务器的test.html文件
        balance roundrobin				#负载均衡调度算法使用轮询算法roundrobin
        server inst1 192.168.80.10:80 check inter 2000 fall 3		#定义在线节点
        server inst2 192.168.80.20:80 check inter 2000 fall 3

---------------------参数说明---------------------------------------------------------------------------

balance roundrobin #负载均衡调度算法
#轮询算法：roundrobin；最小连接数算法：leastconn；来源访问调度算法：source，类似于nginx的ip_hash

check inter 2000 #表示haproxy服务器和节点之间的一个心跳频率
fall3 #表示连续三次检测不到心跳频率则认为该节点失效
若节点配置后带有“backup”表示该节点只是个备份节点，只有主节点失效该节点才会上。不携带“backup”，表示为主节点，和其它主节点共同提供服务。

4.添加haproxy 系统服务

cp /opt/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
cd /etc/init.d
chmod +x haproxy
chkconfig --add /etc/init.d/haproxy

ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy
service haproxy start	或	/etc/init.d/haproxy start

5.节点服务器部署

systemctl stop firewalld
setenforce 0

yum install -y pcre-devel zlib-devel gcc gcc-c++ make 

useradd -M -s /sbin/nologin nginx

cd /opt
tar zxvf nginx-1.12.0.tar.gz -C /opt/

cd nginx-1.12.0/
./configure --prefix=/usr/local/nginx --user=nginx --group=nginx && make && make install

make && make install

--192.168.80.10---
echo "this is accp web" > /usr/local/nginx/html/test.html

--192.168.80.20---
echo "this is benet web" > /usr/local/nginx/html/test.html

ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/

nginx      #启动nginx 服务

6.测试 Web群集
在客户端使用浏览器打开 http://192.168.80.30/test.html ，不断刷新浏览器测试负载均衡效果

2.2 Haproxy集群的构建的具体操作步骤（实操）

实验环境搭建：

web1相关设置如下：

在这里插入图片描述

web2相关设置如下：

在这里插入图片描述

Haproxy服务器配置如下：

在这里插入图片描述

客户端配置如下：

在这里插入图片描述

将Haproxy服务器、web1服务器 和web2服务器防火墙和SElinux关闭

在这里插入图片描述
第一步：配置web1和web2服务器（除test.html文件的内容不一样，其他都步骤都一致）
1）安装Nginx服务器1和2，我这边使用一键部署Nginx服务器脚本，然后添加网页显示内容。

在这里插入图片描述
在这里插入图片描述

2）浏览器中查看网页显示内容

在这里插入图片描述
在这里插入图片描述

第二步：haproxy 服务器部署

1）放入安装包
在这里插入图片描述
2）安装相关依赖包
在这里插入图片描述
3）解压Haproxy安装包
在这里插入图片描述

4）编译安装
在这里插入图片描述在这里插入图片描述

5）在/etc下创建Haproxy目录并将/opt内的Haproxy复制过去
在这里插入图片描述
6）修改主配置文件haproxy.cfg

在这里插入图片描述
在这里插入图片描述

7）添加haproxy 系统服务

在这里插入图片描述
第三步：在客户端中进行访问测试
在这里插入图片描述

在这里插入图片描述

2.3 Haproxy集群的日志重新定义步骤（理论）

#默认haproxy的日志是输出到系统的syslog中，查看起来不是非常方便，为了更好的管理haproxy的日志，我们在生产环境中一般单独定义出来。需要将haproxy的info及notice日志分别记录到不同的日志文件中。

vim /etc/haproxy/haproxy.cfg

global
	log /dev/log local0 info
	log /dev/log local0 notice

service haproxy restart

#需要修改rsyslog配置，为了便于管理。将haproxy相关的配置独立定义到haproxy.conf，并放到/etc/rsyslog.d/下，rsyslog启动时会自动加载此目录下的所有配置文件。

vim /etc/rsyslog.d/haproxy.conf

if ($programname == 'haproxy' and $syslogseverity-text == 'info')
then -/var/log/haproxy/haproxy-info.log
&~
if ($programname == 'haproxy' and $syslogseverity-text == 'notice')
then -/var/log/haproxy/haproxy-notice.log
&~

#说明：
这部分配置是将haproxy的info日志记录到/var/log/haproxy/haproxy-info.log下，将notice日志记录到/var/log/haproxy/haproxy-notice.log下。“&~”表示当日志写入到日志文件后，rsyslog停止处理这个信息。

mkdir /var/log/haproxy/
systemctl restart rsyslog.service

tail -f /var/log/haproxy/haproxy-info.log			#查看haproxy的访问请求日志信息

2.4 Haproxy集群的日志重新定义具体操作步骤（实操）

第一步：确认默认haproxy的日志
在这里插入图片描述
第二步：修改rsyslog配置
在这里插入图片描述
第三步：创建/var/log/haproxy/目录并重启服务

在这里插入图片描述

第四步：在浏览器中重新访问后，测试日志生成
在这里插入图片描述

标签：Haproxy,haproxy,log,nginx,集群,服务器,万千,日志
来源： https://blog.csdn.net/weixin_45551608/article/details/118051870

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

关于我们 | 联系我们 | 留言反馈

专注分享技术，共同学习，共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有