Nginx+Tomcat+Memcached集群

Tomcat集群session同步方案有以下幾種方式：

• 使用tomcat自帶的cluster方式，多個(gè)tomcat間自動實(shí)時(shí)復(fù)制session信息，配置起來很簡單。但這個(gè)方案的效率比較低，在大并發(fā)下表現(xiàn)并不好。原理：http://zyycaesar.iteye.com/blog/296606

• 利用nginx的基于訪問ip的hash路由策略，保證訪問的ip始終被路由到同一個(gè)tomcat上，這個(gè)配置更簡單。但如果應(yīng)用是某一個(gè)局域網(wǎng)大量用戶同時(shí)登錄，這樣負(fù)載均衡就沒什么作用了。
• 利用nginx插件實(shí)現(xiàn)tomcat集群和session同步，nginx-upstream-jvm-route-0.1.tar.gz，是一個(gè) Nginx 的擴(kuò)展模塊，用來實(shí)現(xiàn)基于 Cookie 的 Session Sticky 的功能，可通過http://code.google.com/p/nginx-upstream-jvm-route/downloads/list獲取。

• 利用memcached把多個(gè)tomcat的session集中管理，前端在利用nginx負(fù)載均衡和動靜態(tài)資源分離，在兼顧系統(tǒng)水平擴(kuò)展的同時(shí)又能保證較高的性能。

以下使用第四種方案，集群環(huán)境：

1. nginx最新版本：1.5.7

2. tomcat版本：6.0.37

3. memcached最新版本：1.4.15

4. session復(fù)制同步使用memcache-session-manager最新版本：1.6.5

5. 系統(tǒng)：CentOS6.3

---

一、Nginx安裝

- centos6.3默認(rèn)未安裝gcc-c++，先裝gcc：

yum -y install gcc-c++

裝完后記得reboot系統(tǒng)。

- cd到安裝目錄

cd /usr/lcoal/src

- 安裝pcre庫

cd /usr/local/src wget ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.21.tar.gz tar -zxvf pcre-8.21.tar.gz cd pcre-8.21 ./configure make make install

如果wget下載不到的話，去官網(wǎng)下載pcre-8.12.tar.gz包拷貝到src下。

- 安裝zlib庫

cd /usr/local/srcwget http://zlib.net/zlib-1.2.8.tar.gz tar -zxvf zlib-1.2.8.tar.gz cd zlib-1.2.8 ./configure make make install

- 安裝ssl

cd /usr/local/src wget http://www.openssl.org/source/openssl-1.0.1c.tar.gz tar -zxvf openssl-1.0.1c.tar.gz

- 安裝nginx

cd nginx-1.5.7./configure --prefix=/usr/local/nginx/nginx \ --with-http_ssl_module \ --with-pcre=/usr/local/src/pcre-8.12 \ --with-zlib=/usr/local/src/zlib-1.2.8 \ --with-openssl=/usr/local/src/openssl-1.0.1cmake make install

安裝成功，cd /usr/local/nginx/conf/nginx.conf，修改配置文件：

http { ...upstream localhost {server localhost:8081;server localhost:8082;server localhost:8083;} ... }location / {root html;index index.html index.htm;proxy_pass http://localhost;proxy_redirect off;proxy_set_header Host $host;proxy_set_header X-Real-IP $remote_addr;proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; client_max_body_size 10m;client_body_buffer_size 128k;proxy_connect_timeout 90;proxy_send_timeout 90;proxy_read_timeout 90;proxy_buffer_size 4k;proxy_buffers 4 32k;proxy_busy_buffers_size 64k;proxy_temp_file_write_size 64k; }

?

二、memcached安裝

- memcached安裝較簡單，需要先libevent庫：

sudo yum install libevent libevent-develwget http://www.danga.com/memcached/dist/memcached-1.4.15.tar.gz tar zxf memcached-1.4.15.tar.gz cd memcached-1.4.15 ./configure make sudo make install

安裝成功（默認(rèn)安裝在bin下），啟動：

#-vv 控制臺輸出 #-d 后臺運(yùn)行 /usr/local/bin/memcached -vv

啟動后，可以telnet上去看下狀態(tài)：

telnet 127.0.0.1 11211stats

?

?

三、tomcat配置

1. 修改server.xml

<Engine name="Catalina" defaultHost="localhost" jvmRoute="jvm1">...<Context path="" docBase="/demo/appserver/app/cluster" debug="0" reloadable="true" crossContext="true"> <Manager 　　　　className="de.javakaffee.web.msm.MemcachedBackupSessionManager"memcachedNodes="n1:192.168.2.43:11211"requestUriIgnorePattern=".*\.(png|gif|jpg|css|js|ico|jpeg|htm|html)$"sessionBackupAsync="false"sessionBackupTimeout="1800000"copyCollectionsForSerialization="false"transcoderFactoryClass="de.javakaffee.web.msm.serializer.kryo.KryoTranscoderFactory" /> </Context>

2. 添加mem和msm的依賴jar包

couchbase-client-1.2.2.jar

javolution-5.4.3.1.jar

kryo-1.03.jar

kryo-serializers-0.10.jar

memcached-session-manager-1.6.5.jar

memcached-session-manager-tc6-1.6.5.jar

minlog-1.2.jar

msm-kryo-serializer-1.6.5.jar

reflectasm-0.9.jar

spymemcached-2.10.2.jar

注意點(diǎn)：

-msm1.6.5依賴了Couchbase，需要添加couchbase-client的jar包，否則啟動會報(bào)：java.lang.NoClassDefFoundError: com/couchbase/client/CouchbaseClient。

-tomcat6和7使用不同msm支持包：memcached-session-manager-tc6-1.6.5.jar和memcached-session-manager-tc7-1.6.5.jar，只可選一，否則啟動報(bào)錯(cuò)。

-msm源碼中的lib包版本太低：spymemcached-2.7.jar需要使用2.10.2，否則啟動tomcat報(bào)錯(cuò)：

java.lang.NoSuchMethodError: net.spy.memcached.MemcachedClient.set(Ljava/lang/String;ILjava/lang/Object;)Lnet/spy/memcached/internal/OperationFuture;
at de.javakaffee.web.msm.BackupSessionTask.storeSessionInMemcached(BackupSessionTask.java:227)

kryo-serializers-0.8.jar需要使用0.10版本，否則報(bào)錯(cuò)：

Caused by: java.lang.ClassNotFoundException: de.javakaffee.kryoserializers.DateSerializer

---

tomcat啟動成功后可以去刷新頁面，ip端口會變化，session是不會變化的：

?

memcached的狀態(tài)可以看到同步session的操作日志：

總結(jié)

以上是生活随笔為你收集整理的Nginx+Tomcat+Memcached集群 【测试成功】的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。