[读后感]Java 的 Memcached 在 windows 下安装与使用

2014-12-02 1408

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： 这个 windows 版的安装和应用都很方便，测试时使用，事半功倍。实际生产环境中，要使用 linux 环境布署，确保其稳定性和性能。大数据时代，数据之大，是前所未有的，因为科技不再是企业及科研、政府等专属品，科技已开始以润物细无声之势，渗透到人们的生活中的每一个角落。

这个 windows 版的安装和应用都很方便，测试时使用，事半功倍。

实际生产环境中，要使用 linux 环境布署，确保其稳定性和性能。

大数据时代，数据之大，是前所未有的，

因为科技不再是企业及科研、政府等专属品，

科技已开始以润物细无声之势，渗透到人们的生活中的每一个角落。

然而，人们在体会和习惯于这些科技成果的便利之后，

会如泉涌般滋生出众多新的需求和需要。

科技不再以渗透的姿态出现，

转而去探寻多年培养出来的人们的生活需要，

物质决定意识形态！

人们的意识形态已经形成，

此时，谁能尽早尽快地挖掘出人们潜藏的需求意识，

并尽快出手去满足，将以合众之势，获得前所未有的积少成多的成功。

是时侯出发了，不要再犹豫。

以满足普通大从需要为主的科技运用，

无疑会带来大量的琐碎生活中的数据吞吐，

这也是大数据时代到来的一个根本原因。

Memcached 已不是第一个缓存机制的运用者， CPU 中的 L1、L2 Cache，就是微观的良好运用。

到后来的网页浏览的本机缓存，

再到 Memcached 的分布式缓存，

形势的发展，源于网络带宽的增大以及内存的低价高容，

一些物质基础的发展变化，就会带来人们意识形态的变化，

当变化被洞查到之后，就会有创新。

Ajax 当年不就是这样的实例吗，虽然 web socket 已经开始，但不能否认 Ajax 引领了一个时代，虽然真正应用并不到位。

8月 3 2014

Memcached在windows下安装与使用

建议：windows系统下仅为测试所有，生产环境下服务端应使用Linux系统。
本文最后更新于：2014-08-03 18:24
原文：http://www.yaosansi.com/post/memcached-on-windows

1. Memcached介绍

Memcached 是一个高性能的分布式内存对象缓存系统，用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数，从而提供动态、数据库驱动网站的速度。Memcached基于一个存储键/值对的hashmap。其守护进程（daemon ）是用C写的，但是客户端可以用任何语言来编写，并通过memcached协议与守护进程通信。但是它并不提供冗余（例如，复制其hashmap条目）；当某个服务器S停止运行或崩溃了，所有存放在S上的键/值对都将丢失。
百度百科 baike.baidu.com/view/794242.htm/

Memcached官方： http://memcached.org/

2. Windows版本下载与安装

2.1 下载地址

memcached 1.4.4 for Windows 32-bit

2.2 安装Memcache为系统服务

下载memcached的windows稳定版，解压放某个盘下面，比如在c:\memcached
在CMD下输入 “c:\memcached\memcached.exe -d install“ 安装.
再输入：”c:\memcached\memcached.exe -d start“ 启动。

NOTE:
也可以不安装直接启动
以后memcached将作为windows的一个服务每次开机时自动启动。这样服务器端已经安装完毕了。

如果下载的是二进制的版本，直接运行就可以了，可以加上参数来加以设置。

2.3 常用命令

- p <num> 监听的端口

- l <ip_addr> 连接的IP地址, 默认是本机

- d start 启动memcached服务

- d restart 重起memcached服务

- d stop|shutdown 关闭正在运行的memcached服务

- d install 安装memcached服务

- d uninstall 卸载memcached服务

- u <username> 以<username>的身份运行 (仅在以root运行的时候有效)

- m <num> 最大内存使用，单位MB。默认64MB

- M 内存耗尽时返回错误，而不是删除项

- c <num> 最大同时连接数，默认是1024

- f <factor> 块大小增长因子，默认是1.25

- n <bytes> 最小分配空间，key+value+flags默认是48

- h 显示帮助

然后就可以用.net 的memcached客户端来试一下了。

3. 客户端使用

3.1 C#下可用的library

每个客户端API中都有详细的说明和注释

.NET memcached client library https://sourceforge.net/projects/memcacheddotnet/
EnyimMemcached http://www.codeplex.com/EnyimMemcached/ - Client developed in .NET 2.0 keeping performance and extensibility inmind. (Supports consistent hashing.)
beitmemcached h.NET memcached client library http://code.google.com/p/beitmemcached/ - Client developed by BeIT with many new features

博客园使用的组合为： couchbase+EnyimMemcached http://www.couchbase.com/

3.2 一致性hash算法

memcache的一致性hash算法使用

.NET实现（注释参考JAVA版本） link

public class KetamaNodeLocator

{

//原文中的JAVA类TreeMap实现了Comparator方法，这里我图省事，直接用了net下的SortedList，其中Comparer接口方法）

private SortedList< long, string> ketamaNodes = new SortedList< long, string>();

private HashAlgorithm hashAlg;

private int numReps = 160;

//此处参数与JAVA版中有区别，因为使用的静态方法，所以不再传递HashAlgorithm alg参数

public KetamaNodeLocator(List< string> nodes, int nodeCopies)

{

ketamaNodes = new SortedList< long, string>();

numReps = nodeCopies;

//对所有节点，生成nCopies个虚拟结点

foreach ( string node in nodes)

{

//每四个虚拟结点为一组

for ( int i = 0; i < numReps / 4; i++)

{

//getKeyForNode方法为这组虚拟结点得到惟一名称

byte[] digest = HashAlgorithm.computeMd5(node + i);

/** Md5是一个16字节长度的数组，将16字节的数组每四个字节一组，分别对应一个虚拟结点，这就是为什么上面把虚拟结点四个划分一组的原因*/

for ( int h = 0; h < 4; h++)

{

long m = HashAlgorithm.hash(digest, h);

ketamaNodes[m] = node;

}

public string GetPrimary( string k)

{

byte[] digest = HashAlgorithm.computeMd5(k);

string rv = GetNodeForKey(HashAlgorithm.hash(digest, 0));

return rv;

}

string GetNodeForKey( long hash)

{

string rv;

long key = hash;

//如果找到这个节点，直接取节点，返回

if (!ketamaNodes.ContainsKey(key))

{

//得到大于当前key的那个子Map，然后从中取出第一个key，就是大于且离它最近的那个key 说明详见: http://www.javaeye.com/topic/684087

var tailMap = from coll in ketamaNodes

where coll.Key > hash

select new { coll.Key };

if (tailMap == null || tailMap.Count() == 0)

key = ketamaNodes.FirstOrDefault().Key;

else

key = tailMap.FirstOrDefault().Key;

}

rv = ketamaNodes[key];

return rv;

}

下面的代码与JAVA中有所不同，它使用静态方法实现

静态方法实现 link

public class HashAlgorithm

{

public static long hash( byte[] digest, int nTime)

{

long rv = (( long)(digest[ 3 + nTime * 4] & 0xFF) << 24)

| (( long)(digest[ 2 + nTime * 4] & 0xFF) << 16)

| (( long)(digest[ 1 + nTime * 4] & 0xFF) << 8)

| (( long)digest[ 0 + nTime * 4] & 0xFF);

return rv & 0xffffffffL; /* Truncate to 32-bits */

}

/**

* Get the md5 of the given key.

public static byte[] computeMd5( string k)

{

MD5 md5 = new MD5CryptoServiceProvider();

byte[] keyBytes = md5.ComputeHash(Encoding.UTF8.GetBytes(k));

md5.Clear();

//md5.update(keyBytes);

//return md5.digest();

return keyBytes;

}

4. Linux系统安装memcached

wget http://memcached.org/latest

tar -zxvf memcached- 1.x.x.tar.gz

cd memcached- 1.x.x

./configure --prefix=/usr/local/memcached

make && make test

sudo make install

Ubuntu & Debian

apt-get install memcached

Redhat/Fedora

yum install memcached

FreeBSD

portmaster databases/memcached

参考

memcached官方 http://www.memcached.org/
https://code.google.com/p/memcached/
Memcached深度分析
一致性Hash算法(KetamaHash)的c#实现 http://www.cnblogs.com/daizhj/archive/2010/08/24/1807324.html

Comments