zoukankan      html  css  js  c++  java

  • Nginx+Memcached+Tomcat集群配置实践（Sticky Session）

    准备工作

    创建一个简单的web应用，名为session。其中有两个页面，分别如下所示：
    • 页面login.jsp
    [html] view plaincopy
    1. <%@ page language="java" contentType="text/html; charset=UTF-8"  
    2.      pageEncoding="UTF-8"%>  
    3. <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">  
    4. <html>  
    5. <head>  
    6. <title>登录页面</title>  
    7. <meta http-equiv="pragma" content="no-cache">  
    8. <meta http-equiv="cache-control" content="no-cache">  
    9. <meta http-equiv="expires" content="0">  
    10. <meta http-equiv="keywords" content="keyword1,keyword2,keyword3">  
    11. <meta http-equiv="description" content="This is my page">  
    12. </head>  
    13. <body>  
    14.      <table bgcolor="#F8C3C3" border="1" borderColor="#FF0000"  
    15.           align="center" width="260" height="160">  
    16.           <tr>  
    17.                <td height="15" colspan="2" align="center"  
    18.                     style="background-color: #000000; font-size: 28px; color: #FFFF00"><b>用户登录</b></td>  
    19.           </tr>  
    20.           <form method="post" action="login">  
    21.                <tr>  
    22.                     <td width="80" align="center"><b>用户名</b></td>  
    23.                     <td><input type="text" name="userName" value="" /></td>  
    24.                </tr>  
    25.                <tr>  
    26.                     <td align="center"><b>密 码</b></td>  
    27.                     <td><input type="password" name="password" value="" /></td>  
    28.                </tr>  
    29.                <tr>  
    30.                     <td colspan="2" align="center" style="background-color: #000000;">  
    31.                          <input type="submit" value="登 录" />  <input type="reset"  
    32.                          value="重 置" />  
    33.                     </td>  
    34.                </tr>  
    35.           </form>  
    36.      </table>  
    37. </body>  
    38. </html>  
    • 登录成功页面success.jsp
    [html] view plaincopy
    1. <%@ page language="java" import="java.util.*" pageEncoding="UTF-8"%>  
    2. <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">  
    3. <html>  
    4. <head>  
    5. <title>登录成功页面</title>  
    6. <meta http-equiv="pragma" content="no-cache">  
    7. <meta http-equiv="cache-control" content="no-cache">  
    8. <meta http-equiv="expires" content="0">  
    9. <meta http-equiv="keywords" content="keyword1,keyword2,keyword3">  
    10. <meta http-equiv="description" content="This is my page">  
    11. </head>  
    12. <%  
    13.      String userName = (String) request.getSession().getAttribute("userName");  
    14. %>  
    15. <body bgcolor="#000000">  
    16.      <table width="500" height="200" align="center" border="1"  
    17.           style="background-color: #000000;">  
    18.           <tr>  
    19.                <td align="center"  
    20.                     style="background-color: #F8C3C3; color: #00FF00; font-weight: bold; font-size: 30px">  
    21.                     当前登录用户：<%=userName %>  
    22.                </td>  
    23.           </tr>  
    24.      </table>  
    25. </body>  
    26. </html>  
    还有一个Servlet，负责请求的转发，并设置session数据，如下所示：
    [java] view plaincopy
    1. package org.shirdrn.cluster.tomcat.servlet;  
    2.   
    3. import java.io.IOException;  
    4. import java.util.HashMap;  
    5. import java.util.Map;  
    6.   
    7. import javax.servlet.ServletException;  
    8. import javax.servlet.http.HttpServlet;  
    9. import javax.servlet.http.HttpServletRequest;  
    10. import javax.servlet.http.HttpServletResponse;  
    11.   
    12. import org.apache.commons.logging.Log;  
    13. import org.apache.commons.logging.LogFactory;  
    14.   
    15. public class LoginSevlet extends HttpServlet {  
    16.      private static final long serialVersionUID = 1L;  
    17.      private static final Log LOG = LogFactory.getLog(LoginSevlet.class);  
    18.     private static Map<String, String> accountDB = new HashMap<String, String>();  
    19.     static {  
    20.          accountDB.put("shirdrn", "123456");  
    21.          accountDB.put("admin", "999999");  
    22.          accountDB.put("dev", "000888");  
    23.          accountDB.put("007", "007007");  
    24.     }  
    25.      
    26.     public LoginSevlet() {  
    27.         super();  
    28.     }  
    29.   
    30.      protected void doGet(HttpServletRequest request, HttpServletResponse response) throws ServletException, IOException {  
    31.           this.doPost(request, response);  
    32.      }  
    33.   
    34.      protected void doPost(HttpServletRequest request, HttpServletResponse response) throws ServletException, IOException {  
    35.           String userName = request.getParameter("userName");  
    36.           String password = request.getParameter("password");  
    37.           LOG.info("Raw input:userName=" + userName + ",password=" + password);  
    38.            
    39.           if(userName!=null && password!=null  
    40.                     && accountDB.containsKey(userName)  
    41.                     && accountDB.get(userName).equals(password)) {  
    42.                LOG.info("Login;status=SUCCESS");  
    43.                request.getSession().setAttribute("userName", userName);  
    44.                request.getRequestDispatcher("success.jsp").forward(request, response);                
    45.           } else {  
    46.                LOG.info("Login;status=FAIL");  
    47.                request.getRequestDispatcher("login.jsp").forward(request, response);  
    48.           }  
    49.      }  
    50.   
    51. }  
    这里模拟了一个账号数据库，对用户的登录请求进行处理。
    最后打成WAR包，部署到Tomcat集群中的每个结点上。
    Memcached安装、配置、启动

    在Ubuntu系统下，如果没有安装Memcached，可以执行如下命令进行安装：
    [plain] view plaincopy
    1. sudo apt-get install memcached  
    然后，启动Memcached服务进程，这里，我启动了两个服务进程，分别监听端口11211、11311，启动命令如下所示：
    [plain] view plaincopy
    1. sudo /usr/bin/memcached -m 64 -d -u memcache -p 11211 -l 192.168.1.104 -c 5000 -P /tmp/n1-memcached.pid  
    2. sudo /usr/bin/memcached -m 64 -d -u memcache -p 11311 -l 192.168.1.104 -c 5000 -P /tmp/n2-memcached.pid  
    查询Memcached服务状态：
    [plain] view plaincopy
    1. shirdrn@dev:~/servers/cluster/nginx_tomcat_memcached$ ps -ef | grep memcached  
    2. memcache  1578     1  0 Jan25 ?        00:00:00 /usr/bin/memcached -m 64 -p 11211 -u memcache -l 127.0.0.1  
    3. memcache  3300     1  0 Jan25 ?        00:00:00 /usr/bin/memcached -m 64 -d -u memcache -p 11211 -l 192.168.1.104 -c 5000 -P /tmp/n1-memcached.pid  
    4. memcache  3308     1  0 00:00 ?        00:00:00 /usr/bin/memcached -m 64 -d -u memcache -p 11311 -l 192.168.1.104 -c 5000 -P /tmp/n2-memcached.pid  
    5. shirdrn   3318  3095  0 00:00 pts/5    00:00:00 grep --color=auto memcached  

    Tomcat集群配置

    Tomcat 集群配置，集群中各个结点通过共享存储在缓存Memcached中session来实现session的共享：如果有一台机器上的Tomcat服务停掉 了，对于其他对等服务器上的session数据仍然可以从Memcached缓存中读取，从而不会发生session丢失的问题。
    对于满足这种配置的实现方案，可以在https://code.google.com/p/memcached-session-manager和https://spymemcached.googlecode.com上下载相关的jar文件。因为基于不同的序列化方案，可以有多种配置方法，下面是选择Javolution序列化框架，需要提供如下库文件：
    下载上述jar文件，拷贝到$CATALINA_HOME/lib目录下，然后需要配置$CATALINA_HOME/conf/server.xml文件。
    Tomcat集群中，每个结点的$CATALINA_HOME/conf/server.xml基本配置都是相同的，不同配置内容分别如下：
    • 如果在同一台机器上，要保证各个服务端口不相冲突
    • <Manager>元素中failoverNodes属性值不同
    例如，我们在同一台机器上配置了两个Tomcat服务器实例，所在目录分别为tomcat-1和tomcat-2，对应的conf/server.xml配置内容如下：
    • tomcat-1/conf/server.xml
    [html] view plaincopy
    1. <?xml version='1.0' encoding='utf-8'?>  
    2.   
    3. <Server port="8085" shutdown="SHUTDOWN">  
    4.      <Listener className="org.apache.catalina.core.AprLifecycleListener" SSLEngine="on" />  
    5.      <Listener className="org.apache.catalina.core.JasperListener" />  
    6.      <Listener className="org.apache.catalina.core.JreMemoryLeakPreventionListener" />  
    7.      <Listener className="org.apache.catalina.mbeans.GlobalResourcesLifecycleListener" />  
    8.      <Listener className="org.apache.catalina.core.ThreadLocalLeakPreventionListener" />  
    9.   
    10.      <GlobalNamingResources>  
    11.           <Resource name="UserDatabase" auth="Container" type="org.apache.catalina.UserDatabase"  
    12.                description="User database that can be updated and saved" factory="org.apache.catalina.users.MemoryUserDatabaseFactory"  
    13.                pathname="conf/tomcat-users.xml" />  
    14.      </GlobalNamingResources>  
    15.   
    16.      <Service name="Catalina">  
    17.           <Connector port="8088" protocol="HTTP/1.1" connectionTimeout="20000"  
    18.                redirectPort="8443" />  
    19.           <Connector port="8089" protocol="AJP/1.3" redirectPort="8443" />  
    20.           <Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat1">  
    21.   
    22.                <Realm className="org.apache.catalina.realm.LockOutRealm">  
    23.                     <Realm className="org.apache.catalina.realm.UserDatabaseRealm"  
    24.                          resourceName="UserDatabase" />  
    25.                </Realm>  
    26.   
    27.                <Host name="localhost" appBase="webapps" unpackWARs="true" autoDeploy="true" deployOnStartup="true">  
    28.                     <Context docBase="/home/shirdrn/servers/cluster/nginx_tomcat_memcached/webapps/session.war" path="/session" reloadable="true">  
    29.                          <Manager className="de.javakaffee.web.msm.MemcachedBackupSessionManager"  
    30.                                             memcachedNodes="n1:192.168.1.104:11211,n2:192.168.1.104:11311"  
    31.                                             failoverNodes="n1"  
    32.                                             requestUriIgnorePattern=".*.(png|gif|jpg|css|js)$"  
    33.                                             sessionBackupAsync="false"  
    34.                                             sessionBackupTimeout="100"  
    35.                              transcoderFactoryClass="de.javakaffee.web.msm.serializer.javolution.JavolutionTranscoderFactory"  
    36.                              copyCollectionsForSerialization="false" />  
    37.                     </Context>  
    38.                     <Valve className="org.apache.catalina.valves.AccessLogValve"  
    39.                          directory="logs" prefix="localhost_access_log." suffix=".txt"  
    40.                          pattern="%h %l %u %t "%r" %s %b" />  
    41.                </Host>  
    42.   
    43.           </Engine>  
    44.      </Service>  
    45. </Server>  
    这里面，failover的Memcached结点是n1，也就是说，如果tomcat-1和n1在同一台机器上的话，session数据会优先复制到存储到Memcached结点n2，这样即使n1所在的结点宕机了，n2所在结点仍然存储了之前的session数据。
    • tomcat-2/conf/server.xml
    [html] view plaincopy
    1. <?xml version='1.0' encoding='utf-8'?>  
    2.   
    3. <Server port="9085" shutdown="SHUTDOWN">  
    4.      <Listener className="org.apache.catalina.core.AprLifecycleListener" SSLEngine="on" />  
    5.      <Listener className="org.apache.catalina.core.JasperListener" />  
    6.      <Listener className="org.apache.catalina.core.JreMemoryLeakPreventionListener" />  
    7.      <Listener className="org.apache.catalina.mbeans.GlobalResourcesLifecycleListener" />  
    8.      <Listener className="org.apache.catalina.core.ThreadLocalLeakPreventionListener" />  
    9.   
    10.      <GlobalNamingResources>  
    11.           <Resource name="UserDatabase" auth="Container" type="org.apache.catalina.UserDatabase"  
    12.                description="User database that can be updated and saved" factory="org.apache.catalina.users.MemoryUserDatabaseFactory"  
    13.                pathname="conf/tomcat-users.xml" />  
    14.      </GlobalNamingResources>  
    15.   
    16.      <Service name="Catalina">  
    17.           <Connector port="9088" protocol="HTTP/1.1" connectionTimeout="20000"  
    18.                redirectPort="9443" />  
    19.           <Connector port="9089" protocol="AJP/1.3" redirectPort="9443" />  
    20.           <Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat1">  
    21.   
    22.                <Realm className="org.apache.catalina.realm.LockOutRealm">  
    23.                     <Realm className="org.apache.catalina.realm.UserDatabaseRealm"  
    24.                          resourceName="UserDatabase" />  
    25.                </Realm>  
    26.   
    27.                <Host name="localhost" appBase="webapps" unpackWARs="true" autoDeploy="true" deployOnStartup="true">  
    28.                     <Context docBase="/home/shirdrn/servers/cluster/nginx_tomcat_memcached/webapps/session.war" path="/session" reloadable="true">  
    29.                          <Manager className="de.javakaffee.web.msm.MemcachedBackupSessionManager"  
    30.                                             memcachedNodes="n1:192.168.1.104:11211,n2:192.168.1.104:11311"  
    31.                                             failoverNodes="n2"  
    32.                                             requestUriIgnorePattern=".*.(png|gif|jpg|css|js)$"  
    33.                                             sessionBackupAsync="false"  
    34.                                             sessionBackupTimeout="100"  
    35.                              transcoderFactoryClass="de.javakaffee.web.msm.serializer.javolution.JavolutionTranscoderFactory"  
    36.                              copyCollectionsForSerialization="false" />  
    37.                     </Context>  
    38.                     <Valve className="org.apache.catalina.valves.AccessLogValve"  
    39.                          directory="logs" prefix="localhost_access_log." suffix=".txt"  
    40.                          pattern="%h %l %u %t "%r" %s %b" />  
    41.                </Host>  
    42.   
    43.           </Engine>  
    44.      </Service>  
    45. </Server>  
    和上面 类似，failover的Memcached结点是n2，也就是说，如果tomcat-2和n2在同一台机器上的话，Session数据会优先复制到存储 到Memcached结点n1，这样即使n2所在的结点宕机了，n1所在结点仍然存储了之前的Session数据。

    上面的 配置实现了Tomcat集群中，通过Memcached实现了Sticky Session（粘性Session），主要是通过配置failover结点来达到目的的。如果采用Non-sticky Session方式，就不需要考虑failover的问题，详细配置扩参考文档（https://code.google.com/p/memcached-session-manager/wiki/SetupAndConfiguration），下面截取一个片段：

    The following example shows a configuration for non-sticky sessions. In this case there's no need for failoverNodes, as sessions are served by all tomcats round-robin and they're not bound to a single tomcat. For non-sticky sessions the configuration (for both/all tomcats) would look like this:

    <Context>
  ...
  <Manager className="de.javakaffee.web.msm.MemcachedBackupSessionManager"
    memcachedNodes="n1:host1.yourdomain.com:11211,n2:host2.yourdomain.com:11211"
    sticky="false"
    sessionBackupAsync="false"
    lockingMode="uriPattern:/path1|/path2"
    requestUriIgnorePattern=".*.(ico|png|gif|jpg|css|js)$"
    transcoderFactoryClass="de.javakaffee.web.msm.serializer.kryo.KryoTranscoderFactory"
    />
</Context>
    分别启动tomcat-1和tomcat-2，如下所示：
    [plain] view plaincopy
    1. shirdrn@dev:~/servers/cluster/nginx_tomcat_memcached$ tomcat-1/bin/catalina.sh start  
    2. Using CATALINA_BASE:   /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1  
    3. Using CATALINA_HOME:   /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1  
    4. Using CATALINA_TMPDIR: /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1/temp  
    5. Using JRE_HOME:        /home/hadoop/installation/jdk1.6.0_30  
    6. Using CLASSPATH:       /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1/bin/bootstrap.jar:/home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1/bin/tomcat-juli.jar  
    7.   
    8. shirdrn@dev:~/servers/cluster/nginx_tomcat_memcached$ tomcat-2/bin/catalina.sh start  
    9. Using CATALINA_BASE:   /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2  
    10. Using CATALINA_HOME:   /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2  
    11. Using CATALINA_TMPDIR: /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2/temp  
    12. Using JRE_HOME:        /home/hadoop/installation/jdk1.6.0_30  
    13. Using CLASSPATH:       /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2/bin/bootstrap.jar:/home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2/bin/tomcat-juli.jar  
    可以查看两个tomcat的启动日志，对比一下：
    • tomcat-1的日志
    [plain] view plaincopy
    1. shirdrn@dev:~/servers/cluster/nginx_tomcat_memcached$ tail -100f tomcat-1/logs/catalina.out  
    2. Jan 26, 2013 12:03:25 AM org.apache.catalina.core.AprLifecycleListener init  
    3. INFO: The APR based Apache Tomcat Native library which allows optimal performance in production environments was not found on the java.library.path: /home/hadoop/installation/jdk1.6.0_30/jre/lib/i386/client:/home/hadoop/installation/jdk1.6.0_30/jre/lib/i386:/home/hadoop/installation/jdk1.6.0_30/jre/../lib/i386:/usr/java/packages/lib/i386:/lib:/usr/lib  
    4. Jan 26, 2013 12:03:26 AM org.apache.coyote.AbstractProtocol init  
    5. INFO: Initializing ProtocolHandler ["http-bio-8088"]  
    6. Jan 26, 2013 12:03:26 AM org.apache.coyote.AbstractProtocol init  
    7. INFO: Initializing ProtocolHandler ["ajp-bio-8089"]  
    8. Jan 26, 2013 12:03:26 AM org.apache.catalina.startup.Catalina load  
    9. INFO: Initialization processed in 1743 ms  
    10. Jan 26, 2013 12:03:26 AM org.apache.catalina.core.StandardService startInternal  
    11. INFO: Starting service Catalina  
    12. Jan 26, 2013 12:03:26 AM org.apache.catalina.core.StandardEngine startInternal  
    13. INFO: Starting Servlet Engine: Apache Tomcat/7.0.26  
    14. Jan 26, 2013 12:03:27 AM de.javakaffee.web.msm.MemcachedSessionService startInternal  
    15. INFO: MemcachedSessionService starts initialization... (configured nodes definition n1:192.168.1.104:11211,n2:192.168.1.104:11311, failover nodes n1)  
    16. 2013-01-26 00:03:27.441 INFO net.spy.memcached.MemcachedConnection:  Added {QA sa=/192.168.1.104:11211, #Rops=0, #Wops=0, #iq=0, topRop=null, topWop=null, toWrite=0, interested=0} to connect queue  
    17. 2013-01-26 00:03:27.442 INFO net.spy.memcached.MemcachedConnection:  Added {QA sa=/192.168.1.104:11311, #Rops=0, #Wops=0, #iq=0, topRop=null, topWop=null, toWrite=0, interested=0} to connect queue  
    18. Jan 26, 2013 12:03:27 AM de.javakaffee.web.msm.RequestTrackingHostValve <init>  
    19. INFO: Setting ignorePattern to .*.(png|gif|jpg|css|js)$  
    20. 2013-01-26 00:03:27.459 INFO net.spy.memcached.MemcachedConnection:  Connection state changed for sun.nio.ch.SelectionKeyImpl@5b0668  
    21. 2013-01-26 00:03:27.460 INFO net.spy.memcached.MemcachedConnection:  Connection state changed for sun.nio.ch.SelectionKeyImpl@1d5a0  
    22. Jan 26, 2013 12:03:27 AM de.javakaffee.web.msm.MemcachedSessionService setLockingMode  
    23. INFO: Setting lockingMode to null  
    24. Jan 26, 2013 12:03:27 AM de.javakaffee.web.msm.MemcachedSessionService createTranscoderFactory  
    25. INFO: Creating transcoder factory de.javakaffee.web.msm.serializer.javolution.JavolutionTranscoderFactory  
    26. Jan 26, 2013 12:03:27 AM de.javakaffee.web.msm.MemcachedSessionService startInternal  
    27. INFO: MemcachedSessionService finished initialization, sticky true, operation timeout 1000, with node ids [n2] and failover node ids [n1]  
    28. Jan 26, 2013 12:03:27 AM org.apache.catalina.startup.HostConfig deployDirectory  
    29. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1/webapps/host-manager  
    30. Jan 26, 2013 12:03:27 AM org.apache.catalina.startup.HostConfig deployDirectory  
    31. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1/webapps/manager  
    32. Jan 26, 2013 12:03:27 AM org.apache.catalina.startup.HostConfig deployDirectory  
    33. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1/webapps/docs  
    34. Jan 26, 2013 12:03:27 AM org.apache.catalina.startup.HostConfig deployDirectory  
    35. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1/webapps/examples  
    36. Jan 26, 2013 12:03:28 AM org.apache.catalina.startup.HostConfig deployDirectory  
    37. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-1/webapps/ROOT  
    38. Jan 26, 2013 12:03:28 AM org.apache.coyote.AbstractProtocol start  
    39. INFO: Starting ProtocolHandler ["http-bio-8088"]  
    40. Jan 26, 2013 12:03:28 AM org.apache.coyote.AbstractProtocol start  
    41. INFO: Starting ProtocolHandler ["ajp-bio-8089"]  
    42. Jan 26, 2013 12:03:28 AM org.apache.catalina.startup.Catalina start  
    43. INFO: Server startup in 1487 ms  
    • tomcat-2的日志
    [plain] view plaincopy
    1. shirdrn@dev:~/servers/cluster/nginx_tomcat_memcached$ tail -100f tomcat-2/logs/catalina.out  
    2. Jan 26, 2013 12:04:34 AM org.apache.catalina.core.AprLifecycleListener init  
    3. INFO: The APR based Apache Tomcat Native library which allows optimal performance in production environments was not found on the java.library.path: /home/hadoop/installation/jdk1.6.0_30/jre/lib/i386/client:/home/hadoop/installation/jdk1.6.0_30/jre/lib/i386:/home/hadoop/installation/jdk1.6.0_30/jre/../lib/i386:/usr/java/packages/lib/i386:/lib:/usr/lib  
    4. Jan 26, 2013 12:04:34 AM org.apache.coyote.AbstractProtocol init  
    5. INFO: Initializing ProtocolHandler ["http-bio-9088"]  
    6. Jan 26, 2013 12:04:34 AM org.apache.coyote.AbstractProtocol init  
    7. INFO: Initializing ProtocolHandler ["ajp-bio-9089"]  
    8. Jan 26, 2013 12:04:34 AM org.apache.catalina.startup.Catalina load  
    9. INFO: Initialization processed in 742 ms  
    10. Jan 26, 2013 12:04:34 AM org.apache.catalina.core.StandardService startInternal  
    11. INFO: Starting service Catalina  
    12. Jan 26, 2013 12:04:34 AM org.apache.catalina.core.StandardEngine startInternal  
    13. INFO: Starting Servlet Engine: Apache Tomcat/7.0.26  
    14. Jan 26, 2013 12:05:07 AM org.apache.catalina.util.SessionIdGenerator createSecureRandom  
    15. INFO: Creation of SecureRandom instance for session ID generation using [SHA1PRNG] took [33,094] milliseconds.  
    16. Jan 26, 2013 12:05:07 AM de.javakaffee.web.msm.MemcachedSessionService startInternal  
    17. INFO: MemcachedSessionService starts initialization... (configured nodes definition n1:192.168.1.104:11211,n2:192.168.1.104:11311, failover nodes n2)  
    18. 2013-01-26 00:05:07.873 INFO net.spy.memcached.MemcachedConnection:  Added {QA sa=/192.168.1.104:11211, #Rops=0, #Wops=0, #iq=0, topRop=null, topWop=null, toWrite=0, interested=0} to connect queue  
    19. 2013-01-26 00:05:07.876 INFO net.spy.memcached.MemcachedConnection:  Added {QA sa=/192.168.1.104:11311, #Rops=0, #Wops=0, #iq=0, topRop=null, topWop=null, toWrite=0, interested=0} to connect queue  
    20. Jan 26, 2013 12:05:07 AM de.javakaffee.web.msm.RequestTrackingHostValve <init>  
    21. INFO: Setting ignorePattern to .*.(png|gif|jpg|css|js)$  
    22. 2013-01-26 00:05:07.896 INFO net.spy.memcached.MemcachedConnection:  Connection state changed for sun.nio.ch.SelectionKeyImpl@701a27  
    23. 2013-01-26 00:05:07.897 INFO net.spy.memcached.MemcachedConnection:  Connection state changed for sun.nio.ch.SelectionKeyImpl@1d5a0  
    24. Jan 26, 2013 12:05:07 AM de.javakaffee.web.msm.MemcachedSessionService setLockingMode  
    25. INFO: Setting lockingMode to null  
    26. Jan 26, 2013 12:05:07 AM de.javakaffee.web.msm.MemcachedSessionService createTranscoderFactory  
    27. INFO: Creating transcoder factory de.javakaffee.web.msm.serializer.javolution.JavolutionTranscoderFactory  
    28. Jan 26, 2013 12:05:07 AM de.javakaffee.web.msm.MemcachedSessionService startInternal  
    29. INFO: MemcachedSessionService finished initialization, sticky true, operation timeout 1000, with node ids [n1] and failover node ids [n2]  
    30. Jan 26, 2013 12:05:08 AM org.apache.catalina.startup.HostConfig deployDirectory  
    31. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2/webapps/host-manager  
    32. Jan 26, 2013 12:05:08 AM org.apache.catalina.startup.HostConfig deployDirectory  
    33. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2/webapps/manager  
    34. Jan 26, 2013 12:05:08 AM org.apache.catalina.startup.HostConfig deployDirectory  
    35. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2/webapps/docs  
    36. Jan 26, 2013 12:05:08 AM org.apache.catalina.startup.HostConfig deployDirectory  
    37. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2/webapps/examples  
    38. Jan 26, 2013 12:05:08 AM org.apache.catalina.startup.HostConfig deployDirectory  
    39. INFO: Deploying web application directory /home/shirdrn/servers/cluster/nginx_tomcat_memcached/tomcat-2/webapps/ROOT  
    40. Jan 26, 2013 12:05:08 AM org.apache.coyote.AbstractProtocol start  
    41. INFO: Starting ProtocolHandler ["http-bio-9088"]  
    42. Jan 26, 2013 12:05:08 AM org.apache.coyote.AbstractProtocol start  
    43. INFO: Starting ProtocolHandler ["ajp-bio-9089"]  
    44. Jan 26, 2013 12:05:08 AM org.apache.catalina.startup.Catalina start  
    45. INFO: Server startup in 34163 ms  
    已经成功启动了。

    Nginx安装、配置、启动

    在Ubuntu系统下，如果没有安装Nginx，可以执行如下命令进行安装：
    [plain] view plaincopy
    1. sudo apt-get install nginx  
    默认情况下，Nginx使用默认的配置文件/etc/nginx/nginx.conf，该配置文件直接包含了虚拟目录配置文件/etc/nginx/sites-available/default，修改该文件的内容为，如下所示：
    [plain] view plaincopy
    1. # You may add here your  
    2. # server {  
    3. #     ...  
    4. # }  
    5. # statements for each of your virtual hosts to this file  
    6.   
    7. ##  
    8. # You should look at the following URL's in order to grasp a solid understanding  
    9. # of Nginx configuration files in order to fully unleash the power of Nginx.  
    10. # http://wiki.nginx.org/Pitfalls  
    11. # http://wiki.nginx.org/QuickStart  
    12. # http://wiki.nginx.org/Configuration  
    13. #  
    14. # Generally, you will want to move this file somewhere, and start with a clean  
    15. # file but keep this around for reference. Or just disable in sites-enabled.  
    16. #  
    17. # Please see /usr/share/doc/nginx-doc/examples/ for more detailed examples.  
    18. ##  
    19.   
    20.   
    21.   
    22. upstream dev.shirdrn.org {  
    23.      server 192.168.1.104:8088 weight=1;  
    24.      server 192.168.1.104:9088 weight=1;  
    25. }  
    26.   
    27.   
    28. server {  
    29.      #listen   80; ## listen for ipv4; this line is default and implied  
    30.      #listen   [::]:80 default ipv6only=on; ## listen for ipv6  
    31.   
    32.      root /usr/share/nginx/www/session;  # session是我们配置的虚拟目录，实际直接指向Tomcat下名为session的web应用  
    33.      index index.html index.htm;  
    34.   
    35.      # Make site accessible from http://localhost/  
    36. #######     server_name localhost;  
    37.      server_name dev.shirdrn.org; # Nginx服务所在主机  
    38.      charset utf-8;  
    39.   
    40.      location / {  
    41.           proxy_pass     http://dev.shirdrn.org; #直接代理tomcat集群  
    42.           proxy_set_header  X-Real-IP  $remote_addr;  
    43.           client_max_body_size  100m;  
    44.   
    45.   
    46.   
    47.           # First attempt to serve request as file, then  
    48.           # as directory, then fall back to index.html  
    49. #######          try_files $uri $uri/ /index.html;  
    50.           # Uncomment to enable naxsi on this location  
    51.           # include /etc/nginx/naxsi.rules  
    52.      }  
    53.   
    54.      location ~ ^/(WEB-INF)/ { # 禁止访问Tomcat下web应用的WEB-INF目录下的资源  
    55.           deny all;  
    56.      }  
    57.   
    58.      location /doc/ {  
    59.           alias /usr/share/doc/;  
    60.           autoindex on;  
    61.           allow 127.0.0.1;  
    62.           deny all;  
    63.      }  
    64.   
    65.      # Only for nginx-naxsi : process denied requests  
    66.      #location /RequestDenied {  
    67.           # For example, return an error code  
    68.           #return 418;  
    69.      #}  
    70.   
    71.      #error_page 404 /404.html;  
    72.   
    73.      # redirect server error pages to the static page /50x.html  
    74.      #  
    75.      #error_page 500 502 503 504 /50x.html;  
    76.      #location = /50x.html {  
    77.      #     root /usr/share/nginx/www;  
    78.      #}  
    79.   
    80.      # pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000  
    81.      #  
    82.      #location ~ .php$ {  
    83.      #     fastcgi_split_path_info ^(.+.php)(/.+)$;  
    84.      #     # NOTE: You should have "cgi.fix_pathinfo = 0;" in php.ini  
    85.      #  
    86.      #     # With php5-cgi alone:  
    87.      #     fastcgi_pass 127.0.0.1:9000;  
    88.      #     # With php5-fpm:  
    89.      #     fastcgi_pass unix:/var/run/php5-fpm.sock;  
    90.      #     fastcgi_index index.php;  
    91.      #     include fastcgi_params;  
    92.      #}  
    93.   
    94.      # deny access to .htaccess files, if Apache's document root  
    95.      # concurs with nginx's one  
    96.      #  
    97.      #location ~ /.ht {  
    98.      #     deny all;  
    99.      #}  
    100. }  
    101.   
    102.   
    103. # another virtual host using mix of IP-, name-, and port-based configuration  
    104. #  
    105. #server {  
    106. #     listen 8000;  
    107. #     listen somename:8080;  
    108. #     server_name somename alias another.alias;  
    109. #     root html;  
    110. #     index index.html index.htm;  
    111. #  
    112. #     location / {  
    113. #          try_files $uri $uri/ /index.html;  
    114. #     }  
    115. #}  
    116.   
    117.   
    118. # HTTPS server  
    119. #  
    120. #server {  
    121. #     listen 443;  
    122. #     server_name localhost;  
    123. #  
    124. #     root html;  
    125. #     index index.html index.htm;  
    126. #  
    127. #     ssl on;  
    128. #     ssl_certificate cert.pem;  
    129. #     ssl_certificate_key cert.key;  
    130. #  
    131. #     ssl_session_timeout 5m;  
    132. #  
    133. #     ssl_protocols SSLv3 TLSv1;  
    134. #     ssl_ciphers ALL:!ADH:!EXPORT56:RC4+RSA:+HIGH:+MEDIUM:+LOW:+SSLv3:+EXP;  
    135. #     ssl_prefer_server_ciphers on;  
    136. #  
    137. #     location / {  
    138. #          try_files $uri $uri/ /index.html;  
    139. #     }  
    140. #}  
    上面配置中根目录为/usr/share/nginx/www，因为我们使用到了一个虚拟目录来对应Tomcat下部署的web应用的path，所以需要在/usr/share/nginx/www下面创建这个对应的虚拟目录：
    [plain] view plaincopy
    1. shirdrn@dev:~/servers/cluster/nginx_tomcat_memcached$ sudo mkdir /usr/share/nginx/www/session  
    最后，可以启动Nginx服务器，执行如下命令：
    [plain] view plaincopy
    1. shirdrn@dev:~$ sudo /etc/init.d/nginx start  
    查询Nginx服务启动状态：
    [plain] view plaincopy
    1. shirdrn@dev:~/servers/cluster/nginx_tomcat_memcached$ sudo ps -ef | grep nginx  
    2. root      3199     1  0 Jan25 ?        00:00:00 nginx: master process /usr/sbin/nginx  
    3. www-data  3200  3199  0 Jan25 ?        00:00:00 nginx: worker process  
    4. www-data  3201  3199  0 Jan25 ?        00:00:00 nginx: worker process  
    5. www-data  3202  3199  0 Jan25 ?        00:00:00 nginx: worker process  
    6. www-data  3203  3199  0 Jan25 ?        00:00:00 nginx: worker process  
    7. shirdrn   3327  3095  0 00:01 pts/5    00:00:00 grep --color=auto nginx  
    这是就可以通过Nginx访问（代理）Web应用首页了。

    集群验证

    上面配置完成，服务都已经启动成功，可以直接请求链接http://dev.shirdrn.org/session，就会直接访问部署在Tomcat服务器上的Java Web应用，看到登录页面。
    使用前面准备的Web应用session中账号数据进行模拟登录，就可以查看Memcached缓存的数据：
    • telnet 192.168.1.104 11211
    telnet到memcached服务端口，查看缓存统计数据。
    [plain] view plaincopy
    1. shirdrn@dev:~$ telnet 192.168.1.104 11211  
    2. Trying 192.168.1.104...  
    3. Connected to 192.168.1.104.  
    4. Escape character is '^]'.  
    5.   
    6. ERROR  
    7. stats  
    8. STAT pid 3300  
    9. STAT uptime 2148  
    10. STAT time 1359131741  
    11. STAT version 1.4.13  
    12. STAT libevent 2.0.16-stable  
    13. STAT pointer_size 32  
    14. STAT rusage_user 0.052003  
    15. STAT rusage_system 0.084005  
    16. STAT curr_connections 7  
    17. STAT total_connections 9  
    18. STAT connection_structures 8  
    19. STAT reserved_fds 20  
    20. STAT cmd_get 23  
    21. STAT cmd_set 6  
    22. STAT cmd_flush 0  
    23. STAT cmd_touch 0  
    24. STAT get_hits 2  
    25. STAT get_misses 21  
    26. STAT delete_misses 0  
    27. STAT delete_hits 0  
    28. STAT incr_misses 0  
    29. STAT incr_hits 0  
    30. STAT decr_misses 0  
    31. STAT decr_hits 0  
    32. STAT cas_misses 0  
    33. STAT cas_hits 0  
    34. STAT cas_badval 0  
    35. STAT touch_hits 0  
    36. STAT touch_misses 0  
    37. STAT auth_cmds 0  
    38. STAT auth_errors 0  
    39. STAT bytes_read 2675  
    40. STAT bytes_written 2835  
    41. STAT limit_maxbytes 67108864  
    42. STAT accepting_conns 1  
    43. STAT listen_disabled_num 0  
    44. STAT threads 4  
    45. STAT conn_yields 0  
    46. STAT hash_power_level 16  
    47. STAT hash_bytes 262144  
    48. STAT hash_is_expanding 0  
    49. STAT expired_unfetched 0  
    50. STAT evicted_unfetched 0  
    51. STAT bytes 858  
    52. STAT curr_items 2  
    53. STAT total_items 6  
    54. STAT evictions 0  
    55. STAT reclaimed 0  
    56. END  
    • telnet 192.168.1.104 11311
    [plain] view plaincopy
    1. shirdrn@dev:~$ telnet 192.168.1.104 11311  
    2. Trying 192.168.1.104...  
    3. Connected to 192.168.1.104.  
    4. Escape character is '^]'.  
    5. stats  
    6. STAT pid 3308  
    7. STAT uptime 2398  
    8. STAT time 1359132000  
    9. STAT version 1.4.13  
    10. STAT libevent 2.0.16-stable  
    11. STAT pointer_size 32  
    12. STAT rusage_user 0.004000  
    13. STAT rusage_system 0.128008  
    14. STAT curr_connections 7  
    15. STAT total_connections 9  
    16. STAT connection_structures 8  
    17. STAT reserved_fds 20  
    18. STAT cmd_get 1  
    19. STAT cmd_set 2  
    20. STAT cmd_flush 0  
    21. STAT cmd_touch 0  
    22. STAT get_hits 0  
    23. STAT get_misses 1  
    24. STAT delete_misses 1  
    25. STAT delete_hits 0  
    26. STAT incr_misses 0  
    27. STAT incr_hits 0  
    28. STAT decr_misses 0  
    29. STAT decr_hits 0  
    30. STAT cas_misses 0  
    31. STAT cas_hits 0  
    32. STAT cas_badval 0  
    33. STAT touch_hits 0  
    34. STAT touch_misses 0  
    35. STAT auth_cmds 0  
    36. STAT auth_errors 0  
    37. STAT bytes_read 644  
    38. STAT bytes_written 2109  
    39. STAT limit_maxbytes 67108864  
    40. STAT accepting_conns 1  
    41. STAT listen_disabled_num 0  
    42. STAT threads 4  
    43. STAT conn_yields 0  
    44. STAT hash_power_level 16  
    45. STAT hash_bytes 262144  
    46. STAT hash_is_expanding 0  
    47. STAT expired_unfetched 1  
    48. STAT evicted_unfetched 0  
    49. STAT bytes 0  
    50. STAT curr_items 0  
    51. STAT total_items 2  
    52. STAT evictions 0  
    53. STAT reclaimed 1  
    54. END  

    我们可以停掉某个Tomcat服务，然后观察Session会话数据的复制过程，能够保证当前集群中的会话数据不丢失，另一个结点仍然能提供基于该存在Session的服务。
  • 相关阅读:
    BZOJ2061 : Country
    BZOJ3591: 最长上升子序列
    BZOJ4356 : Ceoi2014 Wall
    BZOJ2159 : Crash 的文明世界
    BZOJ2149 : 拆迁队
    BZOJ2739 : 最远点
    BZOJ4068 : [Ctsc2015]app
    BZOJ4361 : isn
    BZOJ4404 : [Neerc2015]Binary vs Decimal
    BZOJ4402 : Claris的剑
  • 原文地址：https://www.cnblogs.com/interdrp/p/3733465.html
Copyright © 2011-2022 走看看