在现代网络应用中，负载均衡是提高性能和可靠性的关键因素之一。通过将请求分发到多个服务器上，负载均衡可以确保请求被合理地处理，并避免单点故障。
image.png HAProxy是一个负载均衡软件，开源、高性能，可应用于TCP（第四层）和HTTP（第七层） 借助HAProxy可以快速、可靠地提供基于TCP和HTTP应用的负载均衡解决方案。 优点 （1）可靠性和稳定性非常好，可以与硬件级的F5负载均衡设备相媲美 （2）性能及其强大，最高可以同时维护40000～50000个并发连接，单位时间内处理的最大请求数为20000个，最大数据处理能力可达10Gbps （3）支持多于8种负载均衡算法，同时也支持session保持 （4）支持虚拟主机功能，这样实现W
LVS： 1、抗负载能力强。抗负载能力强、性能高，能达到F5硬件的60%；对内存和cpu资源消耗比较低 2、工作在网络4层，通过vrrp协议转发（仅作分发之用），具体的流量由linux内核处理，因此没有流量的产生。 2、稳定性、可靠性好，自身有完美的热备方案；（如：LVS+Keepalived） 3、应用范围比较广，可以对所有应用做负载均衡； 4、不支持正则处理，不能做动静分离。 5、支持负载均衡算法：rr（轮循）、wrr（带权轮循）、lc（最小连接）、wlc（权重最小连接） 6、配置 复杂，对网络依赖比较大，稳定性很高。
HAProxy是可提供高可用性、负载均衡以及基于TCP(从而可以反向代理mysql等应用)和HTTP应用的代理，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。HAProxy非常适用于并发大（并发达1w以上）web站点，这些站点通常又需要会话保持或七层处理。HAProxy的运行模式使得它可以很简单安全的整合至当前的架构中，同时可以保护web服务器不被暴露到网络上。
前面介绍了负载均衡入门等相关的知识点，今天我将详细的为大家介绍主流软件负载均衡相关知识，希望大家能够从中收获多多！如有帮助，请点在看、转发朋友圈支持一波！！！
你可能会问：为什么不用Nginx作负载均衡？ 原因：每个中间件的选择都是需要进行考量的，如下图所示，Nginx对TCP/IP协议的支持的比较晚，而Haproxy是一个老牌的中间件产品，虽然不支持插件，但其成熟性使得它很可靠。 下面，我们列出负载均衡中间件的对比图：
HAProxy 是一款提供高可用性、负载均衡以及基于TCP（第四层）和HTTP（第七层）应用的代理软件，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在时下的硬件上，完全可以支持数以万计的 并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时可以保护你的web服务器不被暴露到网络上。
本教程将向您展示如何在Ubuntu 14.04上创建高可用性HAProxy负载均衡器设置，并支持浮动IP和Corosync / Pacemaker集群堆栈。HAProxy负载平衡器将分别配置为在两个后端应用程序服务器之间分割流量。如果主负载均衡器发生故障，则浮动IP将自动移至第二个负载均衡器，从而允许恢复服务。
实现负载均衡可以从硬件和软件两方面着手，在硬件上我们可以使用F5等负载均衡器，在软件上我们可以使用LVS、Nginx、HaProxy等负载均衡软件。使用硬件性能强悍，使用软件灵活智能。不过，不管是从硬件层面还是从软件层面去解决负载均衡，其原理不外乎以下几点：
在前面的文章Fayson介绍了《如何使用HAProxy实现HiveServer2负载均衡》和《如何使用Zookeeper实现HiveServer2的HA》。本篇文章主要基于Haproxy方式实现的Hive负载均衡在Hue中配置HiveServer2服务的负载均衡。
Fayson在之前的文章中介绍过《CDH网络要求(Lenovo参考架构)》，《如何为Hadoop集群选择正确的硬件》和《CDH安装前置准备》，而我们在搭建Hadoop集群时，还一件很重要的事就是如何给集群分配角色。
在前面的文章Fayson介绍了《如何使用HAProxy实现Impala的负载均衡》、《如何使用HAProxy实现Kerberos环境下的Impala负载均衡》和《如何使用Nginx实现Impala负载均衡》。本篇文章主要基于Haproxy方式实现的Impala负载均衡在Hue中配置Impala服务的负载均衡。
目前，在线上环境中应用较多的负载均衡器硬件有F5 BIG-IP,软件有LVS，Nginx及HAProxy,高可用软件有Heartbeat、Keepalived，成熟的架构有LVS+Keepalived、Nginx+Keepalived、HAProxy+keepalived及DRBD+Heartbeat.
Nginx的优点是： 1、工作在网络的7层之上，可以针对http应用做一些分流的策略，比如针对域名、目录结构，它的正则规则比HAProxy更为强大和灵活，这也是它目前广泛流行的主要原因之一，Nginx单凭这点可利用的场合就远多于LVS了。 2、Nginx对网络稳定性的依赖非常小，理论上能ping通就就能进行负载功能，这个也是它的优势之一；相反LVS对网络稳定性依赖比较大，这点本人深有体会； 3、Nginx安装和配置比较简单，测试起来比较方便，它基本能把错误用日志打印出来。LVS的配置、测试就要花比较长的时间
案例一： 一、实验拓扑图 二、实验目标：使用haproxy搭建web群集，实现负载均衡和高可用。 三、实验要求： 1、分别在web1和web2上搭建nginx 2、安装和配置haproxy 3、在客户
Centos7安装HAProxy反向代理，TCP 4、7层反向代理和负载均衡，常用作数据库负载均衡 本教程用做数据库负载均衡 命令安装haproxy v1.8.0 安装教程 yum -y install gcc gcc-c++ make wget wget https://github.com/haproxy/haproxy/archive/v1.8.0.tar.gz tar zxf v1.8.0.tar.gz cd haproxy-1.8.0 make TARGET=linux2628 PREFIX=/
高可用性是系统设计的一个功能，允许应用程序在发生故障时自动重启或重新路由工作到另一个有能力的系统。在服务器方面，建立高可用性系统需要一些不同的技术。必须有一个可以重定向工作的组件，并且必须有一种机制来监视故障并在检测到中断时转换系统。
前面Fayson介绍了《如何使用HAProxy实现Impala的负载均衡》，本文主要介绍如何使用HAProxy实现Hive服务的负载均衡。
为了对比Hproxy和Nginx负载均衡的效果，分别在测试机上（以下实验都是在单机上测试的，即负载机器和后端机器都在一台机器上）做了这两个负载均衡环境，并各自抓包分析。 下面说下这两种负载均衡环境下抓包分析后的结果： 1）Haproxy负载均衡环境下的实验记录。后端有一台机器挂掉后，如果还没达到探测的时间点时，请求还会往挂掉的这台机器转发，请求会丢失。 Haproxy负载均衡的实验记录如下： 1--先看下Haproxy的配置。 配置inter 20000为20s检测一次，这个是为了更明显的抓下HAPr
区别 所谓七层负载均衡，也称为“内容交换”，也就是主要通过报文中的真正有意义的应用层内容，再加上负载均衡设备设置的服务器选择方式，决定最终选择的内部服务器。 以常见的TCP为例，负载均衡设备如果要根据真正的应用层内容再选择服务器，只能先代理最终的服务器和客户端建立连接(三次握手)后，才可能接受到客户端发送的真正应用层内容的报文，然后再根据该报文中的特定字段，再加上负载均衡设备设置的服务器选择方式，决定最终选择的内部服务器。负载均衡设备在这种情况下，更类似于一个代理服务器。负载均衡和前端的客户端以及后端的服务器会分别建立TCP连接。所以从这个技术原理上来看，七层负载均衡明显的对负载均衡设备的要求更高，处理七层的能力也必然会低于四层模式的部署方式。
在本章开始之前，我们虽然前面已经创建了集群，但是我们在之前连接集群的方式，都是直连集群中的某一个几点，这样被直连的几点将会承受很大的压力，剩余的节点则比较浪费，所谓的负载均衡就是可以将我们的请求按照一定规则打散到集群中的各个节点，这样我们才可能尽可能大的发挥出系统的性能，提高系统的吞吐量。
PS：Nginx/LVS/HAProxy是目前使用最广泛的三种负载均衡软件，本人都在多个项目中实施过，参考了一些资料，结合自己的一些使用经验，总结一下。 一般对负载均衡的使用是随着网站规模的提升根据不同的阶段来使用不同的技术。具体的应用需求还得具体分析，如果是中小型的Web应用，比如日PV小于1000万，用Nginx就完全可以了；如果机器不少，可以用DNS轮询，LVS所耗费的机器还是比较多的；大型网站或重要的服务，且服务器比较多时，可以考虑用LVS。 一种是通过硬件来进行进行，常见的硬件有比较昂贵的F5和A
Nginx/LVS/HAProxy是目前使用最广泛的三种负载均衡软件，本人都在多个项目中实施过，参考了一些资料，结合自己的一些使用经验，总结一下。 一般对负载均衡的使用是随着网站规模的提升根据不同的阶段来使用不同的技术。具体的应用需求还得具体分析，如果是中小型的Web应用，比如日PV小于1000万，用Nginx就完全可以了；如果机器不少，可以用DNS轮询，LVS所耗费的机器还是比较多的；大型网站或重要的服务，且服务器比较多时，可以考虑用LVS。 一种是通过硬件来进行进行，常见的硬件有比较昂贵的F5和Arra
PS：Nginx/LVS/HAProxy是目前使用最广泛的三种负载均衡软件，本人都在多个项目中实施过，参考了一些资料，结合自己的一些使用经验，总结一下。
先备份配置文件 mv /etc/haproxy/haproxy.cfg /etc/haproxy/haproxy.cfg.bak 然后进行设置新的配置 vim /etc/haproxy/haproxy.cfg
HAProxy是一款提供高可用性、负载均衡以及基于TCP（第四层）和HTTP（第七层）应用的代理软件，HAProxy是完全免费的、借助HAProxy可以快速并且可靠的提供基于TCP和HTTP应用的代理解决方案。 （1）免费开源，稳定性也是非常好，这个可通过我做的一些小项目可以看出来，单Haproxy也跑得不错，稳定性可以与硬件级的F5相媲美； （2）根据官方文档，HAProxy可以跑满10Gbps-New benchmark of HAProxy at 10 Gbps using Myricom's 10G
HAProxy是一个使用C语言编写的自由及开放源代码软件[1]，其提供高可用性、负载均衡，以及基于TCP和HTTP的应用程序代理。
当前大多数的互联网系统都使用了服务器集群技术，集群是将相同服务部署在多台服务器上构成一个集群整体对外提供服务，这些集群可以是 Web 应用服务器集群，也可以是数据库服务器集群，还可以是分布式缓存服务器集群等等。
OSI: open system interconnection 开放式系统互联参考模型
软件：haproxy---主要是做负载均衡的7层，也可以做4层负载均衡 apache也可以做7层负载均衡，但是很麻烦。实际工作中没有人用。 负载均衡是通过OSI协议对应的 7层负载均衡：用的7层http协议， 4层负载均衡：用的是tcp协议加端口号做的负载均衡
可以，禁用iptables并不会影响LVS的使用。LVS是在Linux内核层面实现的负载均衡技术，其底层并不依赖于iptables进行流量转发。LVS使用IP隧道或网络地址转换（NAT）等技术将来自客户端的流量转发到后端服务器上，而不依赖于iptables规则。
在上节中我们创建了 mysql 集群。 实际工作中，我们不希望让某一数据库节点处理所有的请求，这样的话单个负载高，性能差。
软负载方案介绍 谈到负载均衡，目前业内全球最出名的应该是F5，国内深信服在这方面知名度也很高。硬件厂商的负载均衡方案有其优势，这点毋庸置疑。那么，负载相对较低的环境下，是否有基于开源的软负载方案呢？ 目前业内常见的几种软负载方案有： 1.LVS （Linux Virtual Server）。红帽RHEL6及以前版本的操作系统的软负载方案就是LVS，有单独的订阅服务。 2. HAproxy。红帽RHEL7软负载方案是HAProxy，并且有单独的订阅服务。红帽PaaS解决方案中，也是用HAproxy做容器的
在平时进行一些挖洞、扫描或者爬虫工作的时候，被封 IP 的情况时有发生，解决这个问题较好的方法可能就是挂代理了。但是代理有时也会被封，并且有的代理质量可能还不太高，这时采用负载均衡个人觉着是一种不错的解决方法。
负载均衡，英文名称为Load Balance，是指建立在现有网络结构之上，并提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。其原理就是数据流量分摊到多个服务器上执行，减轻每台服务器的压力，多台服务器共同完成工作任务，从而提高了数据的吞吐量。
1、工作在网络7层之上，可针对http应用做一些分流的策略，如针对域名、目录结构，它的正规规则比HAProxy更为强大和灵活，所以，目前为止广泛流行。
前面Fayson介绍过《如何使用Nginx实现Impala负载均衡》，正如之前所说Cloudera官网推荐并支持的负载均衡为HAProxy。所以Fayson就介绍一下如何使用HAProxy实现Impala服务的负载均衡。
负载均衡集群介绍 主流开源软件LVS、keepalived、haproxy、nginx等 其中LVS属于4层（网络OSI 7层模型），nginx属于7层，haproxy既可以认为是4层，也可以当做7层使用 keepalived的负载均衡功能其实就是lvs，lvs是keepalived内置的 lvs这种4层的负载均衡是可以分发TCP协议，web服务是80端口，除了分发80端口，还有其他的端口通信的，比如MySQL的负载均衡，就可以用LVS实现，而nginx仅仅支持http，https，mail，haprox
软件：haproxy---主要是做负载均衡的7层，也可以做4层负载均衡 apache也可以做7层负载均衡，但是很麻烦。实际工作中没有人用。负载均衡是通过OSI协议对应的 7层负载均衡：用的7层http协议， 4层负载均衡：用的是tcp协议加端口号做的负载均衡
一般如果是小公司的话一台7就可以了, 如果是中型公司如果没有做跨地域的业务一般都是只有一个机房的, 一般就是4+7就可以了, 如果是做大型跨地域, 或者是跨国业务的话, 都会有不同的地域机房, 会走DNS地域优先, 然后走4+7
最近业务系统需要使用Impala作为查询引擎，在使用Impala JDBC连接Impala服务时，默认是不带负载均衡的，需要指定ImpalaD的机器。指定机器的情况下会产生单点故障和负载过重的问题，因此在多用户和生产环境下对于Impala的JDBC服务需要做负载均衡。
0x01.大型网站演化 简单说，分布式是以缩短单个任务的执行时间来提升效率的，而集群则是通过提高单位时间内执行的任务数来提升效率。 集群主要分为：高可用集群(High Availability Cluster)，负载均衡集群(Load Balance Cluster，nginx即可实现)，科学计算集群(High Performance Computing Cluster)。 分布式是指将不同的业务分布在不同的地方；而集群指的是将几台服务器集中在一起，实现同一业务。分布式中的每一个节点，都可以做集群。 而集群
开启： service haproxy start 或 systemctl start haproxy
在做过了haprxy负载均衡和动静分离后，haproxy在这两方面的确比nginx更专业一些，session保持，cookie引导，url监测后端，MySQL负载均衡等都是nginx所不具备的；但这并不能就说haprox就能取代nginx，nginx的缓存就是proxy所不具备的。
单服务器的简单配置通常是考虑客户端SSL连接如何被接收请求的服务器解码。由于负载均衡器处在客户端和更多服务器之间，SSL连接解码就成了需要关注的焦点。
一种高效、可靠、免费的高可用及负载均衡软件，非常适合于高负载站点的七层数据请求。客户端通过Haproxy代理服务器获得站点页面，而代理服务器收到客户请求后根据负载均衡的规则将请求数据转发给后端真实服务器，实现了一种事件驱动、单一进程模型，能支持非常大的并发连接数。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
