Apache Httpd负载均衡Tomcat并实现Session Sticky和Session Cluster

Net18-AnyISalIn • • Linux干货, 系统运维

Apache Httpd负载均衡Tomcat并实现Session Sticky和Session Cluster

前言

上篇文章我们介绍如何构建一个LANMT平台并搭建一个jspxcms, 这次我们介绍使用apache httpd负载均衡Tomcat并实现Session Sticky和Session Cluster

实验拓扑

blob.png

实验步骤

安装配置tomcat

我们首先配置Tomcat, 安装过程这里不做叙述, 不明白的可以看我上篇博客: tomcat基础进阶

安装Tomcat，node2,3都要操作

[root@node1 ~]# [root@node1 ~]# wget http://mirrors.cnnic.cn/apache/tomcat/tomcat-8/v8.0.33/bin/apache-tomcat-8.0.33.tar.gz
[root@node1 ~]# tar xf apache-tomcat-8.0.33.tar.gz  -C /usr/local/
[root@node1 ~]# cd /usr/local ; ln -sv apache-tomcat-8.0.33 tomcat ; cd ~
[root@node1 ~]# wget http://download.oracle.com/otn-pub/java/jdk/8u77-b03/jdk-8u77-linux-x64.rpm #如果下载出错, 使用浏览器下载
[root@node1 ~]# rpm -ivh jdk-8u77-linux-x64.rpm   #安装JDK

[root@node1 ~]# vim /etc/profile.d/java.sh     #定义JAVA_HOME
export JAVA_HOME=/usr/java/latest
export PATH=$JAVA_HOME/bin:$PATH

[root@node1 ~]# vim /etc/profile.d/tomcat.sh    #配置tomcat的环境变量
export CATALINA_BASE=/usr/local/tomcat
export PATH=$CATALINA_BASE/bin:$PATH

[root@node1 ~]# source /etc/profile.d/tomcat.sh
[root@node1 ~]# source /etc/profile.d/java.sh

配置虚拟主机

[root@node2 ~]# vim /usr/local/tomcat/conf/server.xml   

#设置默认虚拟主机为web1.anyisalin.com #node3的jvmRoute设置为TomcatB
<Engine name="Catalina" defaultHost="web1.anyisalin.com" jvmRoute="TomcatA">  


#添加虚拟主机
<Host name="web1.anyisalin.com" appBase="/data/webapps/" unpackWARS="true" autoDeploy="true">
   <Context path="" docBase="/data/webapps" reloadable="true" />
     <Valve className="org.apache.catalina.valves.AccessLogValve" directory="/data/logs"
        prefix="web1_access_log." suffix=".txt"
        pattern="%h %l %u %t &quot;%r&quot; %s %b" />
</Host>

[root@node2 ~]# mkdir -PV /data/webapps/{WEB-INF,META-INF,classes,lib}  #创建目录

node2创建网页文件

[root@node2 ~]# cd /data/webapps/

[root@node2 ~]# vim index.jsp  #创建网页文件
<%@ page language="java" %>
<html>
  <head><title>TomcatA</title></head>
  <body>
    <h1><font color="red">TomcatA.magedu.com</font></h1>
    <table align="centre" border="1">
      <tr>
        <td>Session ID</td>
    <% session.setAttribute("magedu.com","magedu.com"); %>
        <td><%= session.getId() %></td>
      </tr>
      <tr>
        <td>Created on</td>
        <td><%= session.getCreationTime() %></td>
     </tr>
    </table>
  </body>
</html>

[root@node2 webapps]# catalina.sh start #启动tomcat

node3创建网页文件

[root@node3 ~]# cd /data/webapps/

[root@node3 ~]# vim index.jsp  #创建网页文件
<%@ page language="java" %>
<html>
  <head><title>TomcatB</title></head>
  <body>
    <h1><font color="blue">TomcatB.magedu.com</font></h1>
    <table align="centre" border="1">
      <tr>
        <td>Session ID</td>
    <% session.setAttribute("magedu.com","magedu.com"); %>
        <td><%= session.getId() %></td>
      </tr>
      <tr>
        <td>Created on</td>
        <td><%= session.getCreationTime() %></td>
     </tr>
    </table>
  </body>
</html>

[root@node3 webapps]# catalina.sh start #启动tomcat

访问测试

blob.png

blob.png

安装配置Apache Httpd并测试

安装httpd 在node1

[root@node1 ~]# yum install httpd -y

配置httpd 
mod_Proxy_balancer模块文档

[root@node1 ~]# cd /etc/httpd/conf.d/

[root@node1 conf.d]# vim virt.conf 
<Proxy balancer://lbcluster>
   BalancerMember ajp://172.16.1.3:8009 loadfactor=1 route=TomcatA
   BalancerMember ajp://172.16.1.4:8009 loadfactor=1 route=TomcatB
</Proxy>

<VirtualHost *:80>
  ServerName www.anyisalin.com
  ProxyVia On
  ProxyRequests Off
  ProxyPassReverse / balancer://lbcluster/
  ProxyPass / balancer://lbcluster/
</VirtualHost>

[root@node1 conf.d]# service httpd start  #启动httpd

测试负载均衡效果

Apache Httpd负载均衡Tomcat并实现Session Sticky和Session Cluster

实现session sticky

如果tomcat运行着一个动态站点, 那么上面这种byrequest的负载均衡调度算法就有很大问题了, 可能刚登录站点再刷新又回到没有登录的状态了, 所以我们就要实现session sticky, 其实session sticky就是我们之前lvs的sh算法, 和nginx的ip_hash实现的效果

编辑httpd配置文件

[root@node1 ~]# vim /etc/httpd/conf.d/virt.conf   
## 主要添加两段参数
##Header add Set-Cookie "ROUTEID=.%{BALANCER_WORKER_ROUTE}e; path=/" env=BALANCER_ROUTE_CHANGED
##ProxySet stickysession=ROUTEID 

Header add Set-Cookie "ROUTEID=.%{BALANCER_WORKER_ROUTE}e; path=/" env=BALANCER_ROUTE_CHANGED #新添加的
<Proxy balancer://lbcluster>
   BalancerMember ajp://172.16.1.3:8009 loadfactor=1 route=TomcatA
   BalancerMember ajp://172.16.1.4:8009 loadfactor=1 route=TomcatB
   ProxySet stickysession=ROUTEID  #新添加的
</Proxy>

<VirtualHost *:80>
  ServerName www.anyisalin.com
  ProxyVia On
  ProxyRequests Off
  ProxyPassReverse / balancer://lbcluster/
  ProxyPass / balancer://lbcluster/
</VirtualHost>

[root@node1 conf.d]# service httpd restart   #重启httpd

测试session sticky效果 
如下图, 我们成功的将session绑定在了TomcatA(Node2)主机上

Apache Httpd负载均衡Tomcat并实现Session Sticky和Session Cluster

实现Session Cluster

我们使用session sticky会有很多问题, 如果某台主机宕机了, 那么用户的session就丢失了, 所以我们还可以通过session cluster保存用户会话

什么是Session Cluster

正常情况下session信息是保存在用户所访问的服务器上，服务器宕机, 用户的session就丢失了, 但是我们可以通过session cluster的方式来实现将用户的session信息保存在后端所有的服务器上， 这样来, 无论用户在访问哪一台服务器，session都不会丢失

四种常见的session manager

  • StandardManager

  • PersistentManager: 可以将session信息保存在持久存储中

  • DeltaManager: 将session信息通过多播的形式共享到其他节点

  • BackupManager: 将session信息共享到特定的一个节点上

注意: 我们要删掉刚才对session sticky的配置

编辑tomcat作配置文件

[root@node2 conf]# vim server.xml
下列内容放在<Host />内

<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"
        channelSendOptions="8">

<Manager className="org.apache.catalina.ha.session.DeltaManager"
         expireSessionsOnShutdown="false"
         notifyListenersOnReplication="true"/>

<Channel className="org.apache.catalina.tribes.group.GroupChannel">
   <Membership className="org.apache.catalina.tribes.membership.McastService"
         address="228.0.1.7"
         port="45564"
         frequency="500"
         dropTime="3000"/>
<Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
          address="auto"
          port="4000"
          autoBind="100"
          selectorTimeout="5000"
          maxThreads="6"/>

<Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
     <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
      </Sender>
       <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
       <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
          </Channel>

          <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"
                 filter=""/>
          <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>

          <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"
                    tempDir="/tmp/war-temp/"
                    deployDir="/tmp/war-deploy/"
                    watchDir="/tmp/war-listen/"
                    watchEnabled="false"/>

 <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
</Cluster>

配置WEB-INF中的web.xml文件

[root@node2 conf]# cd /data/webapps/
[root@node2 webapps]# cp /usr/local/tomcat/webapps/ROOT/WEB-INF/web.xml WEB-INF/  #拷贝一份模板
[root@node2 webapps]# vim WEB-INF/web.xml
#添加下面这一行，在</web-app>内
<distributable/>

##注意: 这里是node3
[root@node3 webapps]# scp node2.anyisalin.com:/usr/local/tomcat/conf/server.xml /usr/local/tomcat/conf/server.xml  #复制node2配置文件
[root@node3 webapps]# scp node2.anyisalin.com:/data/webapps/WEB-INF/web.xml /data/webapps/WEB-INF/ 

[root@node2 webapps]# catalina.sh stop  #重启tomcat
[root@node2 webapps]# catalina.sh start 

[root@node3  webapps]# catalina.sh stop  #重启tomcat
[root@node3 webapps]# catalina.sh start

session cluster测试 
如下图, 现在我们即使使用byrequests算法也不会丢失sesssion

Apache Httpd负载均衡Tomcat并实现Session Sticky和Session Cluster

总结

我们本文实现了tomcat的负载均衡和session保持的各种方法, 但是还是有很大问题, 我们试想在用户并发高的场景下, 多台tomcat服务器一直在多播, 很可能造成网络拥塞, 所以我们还有一种解决方案session server, 使用单台服务器保存用户的session信息, 我们会在下篇文章向大家介绍!

作者水平很低, 如果有错误及时指出, 如果你觉得本文写的好请点一波赞~(≧▽≦)/~ 
作者: AnyISaIln QQ: 1449472454 
感谢: MageEdu

原创文章，作者：Net18-AnyISalIn，如若转载，请注明出处：http://www.178linux.com/15225

赞 (0)
Net18-AnyISalInNet18-AnyISalIn
1
上一篇 2016-04-22
下一篇 2016-04-22

相关推荐

  • 系统之锹sysdig：Linux服务器监控和排障利器

    当你需要追踪某个进程产生和接收的系统调用时，首先浮现在你脑海中的是什么？你可能会想到strace，那么你是对的。你会使用什么样的命令行工具来监控原始网络通信呢？如果你想到了tcpdump，你又作出了一个极佳的选择。而如果你碰到必须追踪打开的文件（在Unix意义上：一切皆文件）的需求，可能你会使用lsof。 strace、tcpdump以及lsof，确实是些伟…

    Linux干货 2015-02-09

  • 文本处理工具sed

    处理文本的工具sed     stream EDitor，行编辑器     sed是一种流编辑器，他一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，成为“模式空间”（pattern space），接着用sed命令处理缓存区中的内容，处理完成后，把缓冲区的内容送往屏幕。…

    Linux干货 2016-08-10

  • 11文件查找find和locate

    有些时候我们是想要在系统中查找某个具体的文件，却不知道路径在哪里，只是知道其中的某些特性，比如大小或者名字什么的。这时候就要用到查找工具啦。 在文件系统上查找符合条件的文件命令有两个，locate和find，其中locate是非实时查找即数据库查找。而find是实时查找 locate： 用法：locate [OPTION]… [PATTERN]&…

    Linux干货 2016-11-27

  • 软件包管理rpm和yum基本使用

    RPM是RedHat Package Manager（RedHat软件包管理工具）类似Windows里面的“添加/删除程序”因而广受欢迎。逐渐受到其他发行版的采用。RPM套件管理方式的出现，让Linux易于安装，升级，间接提升了Linux的适用度。 rpm 执行安装包 二进制包（Binary）以及源代码包（Source）两种。二进制包可以直接安装在计算机中，…

    Linux干货 2016-08-29

  • KVM基本功能

    前言：本来想写出关于KVM的精品文章，然而学的时间不够长，理解也不够透彻。所以有关KVM的高级功能只能等下一次在写。本次只涉及到KVM的基础核心功能，平时经常会使用的功能.。 一、环境准备： 1、BIOS启用Virtualication。 2、在linux系统上查看系统是否支持硬件虚拟化。Intel系列CPU支持虚拟化标识为vmx，AMD系列CPU标识为sv…

    Linux干货 2015-10-27

  • 8月3日课堂笔记

    课堂笔记 linux用户和组管理（非常非常重要） 　　　用户管理和组管理各种相关的应用程序 　　　简单的管理命令 安全上下文： 　　每次对主机操作都是以发起一个进程来完成的，进程代表着人来执行操作，进程以其发起者的身份来运行；所以开机时有很多守护类的进程，我们应该以普通身份来运行，普通用户通常都是系统用户；从来不用登陆系统的；进程对文件的访问权限，取决于发起…

    Linux干货 2016-08-04

评论列表（1条）

  • wxdz_2004(古雨秋)
    wxdz_2004(古雨秋) 2016-08-04 21:35

    你好，session cluster 做实验时，有遇到过session ID 还是会一直变化的问题吗？ 已经把stickysession注释 更改为lbmethod=byrequests

电话咨询
在线咨询