本文说明:memcached分布式缓存的负载均衡配置比例,数据压缩,socket的详细配置等,以及在.net中的常用方法
public class MemcacheHelper { //实例化Client public MemcachedClient MClient; public MemcacheHelper(string poolName) { string[] MemcacheServiceList = { "127.0.0.1:11211", "192.168.100.103:11211" }; //初始化连接池 SockIOPool pool = SockIOPool.GetInstance(poolName); //设置服务器列表 pool.SetServers(MemcacheServiceList); //各服务器之间负载均衡的设置比例 pool.SetWeights(new int[] { 10, 1 }); //初始化时创建连接数 pool.InitConnections = 3; //最小连接数 pool.MinConnections = 3; //最大连接数 pool.MaxConnections = 5; //连接的最大空闲时间,下面设置为6个小时(单位ms),超过这个设置时间,连接会被释放掉 pool.MaxIdle = 1000 * 60 * 60 * 6; //socket连接的超时时间,下面设置表示不超时(单位ms),即一直保持链接状态 pool.SocketConnectTimeout = 0; //通讯的超时时间,下面设置为3秒(单位ms),.Net版本没有实现 pool.SocketTimeout = 1000 * 3; //维护线程的间隔激活时间,下面设置为30秒(单位s),设置为0时表示不启用维护线程 pool.MaintenanceSleep = 30; //设置SocktIO池的故障标志 pool.Failover = true; //是否对TCP/IP通讯使用nalgle算法,.net版本没有实现 pool.Nagle = false; //socket单次任务的最大时间(单位ms),超过这个时间socket会被强行中端掉,当前任务失败。 pool.MaxBusy = 1000 * 10; // 初始化一些值并与MemcachedServer段建立连接 pool.Initialize(); MClient= new MemcachedClient(); //是否启用压缩数据:如果启用了压缩,数据压缩长于门槛的数据将被储存在压缩的形式 MClient.EnableCompression = false; //压缩设置,超过指定大小的都压缩 //MClient.CompressionThreshold = 1024 * 1024; //指定客户端访问的SockIO池 MClient.PoolName = poolName; } } public class Program { public static void Main(string[] args) { //参数设置 string SockIOPoolName = "demo"; MemcacheHelper helper = new MemcacheHelper(SockIOPoolName); //存入key为demoKey,value为Hello World的一个缓存,并设置过期时间 helper.MClient.Add("demoKey", "Hello World", DateTime.Now.AddSeconds(10)); //读出key为demoKey的缓存值 var demovalue = helper.MClient.Get("demoKey"); //输出 Console.WriteLine("缓存的值:" + demovalue); Console.ReadKey(); } }
一、memcached分布式缓存的设置与应用
string[] MemcacheServiceList = { "127.0.0.1:11211", "192.168.100.103:11211" };
//初始化连接池
SockIOPool pool = SockIOPool.GetInstance(poolName);
//设置服务器列表
pool.SetServers(MemcacheServiceList);
//各服务器之间负载均衡的设置比例
pool.SetWeights(new int[] { 10, 1 });
1、在127.0.0.1,与192.168.100.103两台机器上装memcached服务端。
2、pool.SetWeights这里的10跟1意思是,负载均衡比例,假如11000条数据,大致数据分布为:127.0.0.1分布10000条数据左右。另外一台为10000条左右。
3、memcached服务端并不具备负载均衡的能力,而是memcachedClient实现的,具体存取数据实现的核心是采用一致性Hash算法,把key-value分布到某一台服务器中里边。
二、memcached的数据压缩机制
//是否启用压缩数据:如果启用了压缩,数据压缩长于门槛的数据将被储存在压缩的形式 MClient.EnableCompression = false; //压缩设置,超过指定大小的都压缩 //MClient.CompressionThreshold = 1024 * 1024;
1、这个处理是在MemcachedClient对象中,设置这个EnableCompression属性,是否使用压缩的意思,如果启用啦压缩功能 ,则ICSharpCode.SharpZipLib类库会在数据超过预设大小时,进行数据压缩处理。
2、CompressionThreshold这个属性是压缩的阀值,默认是15K,如果超过设定的阀值则使用memcached的通讯协议,存数据时给每个数据项分配一个16为的flag表示,用作记录是否有压缩,如果有压缩则提取数据是进行解压。如果没有超过阀值则不压缩,直接存储。
三、怎么使用客户端多个SocketIO池
//初始化池
SockIOPool pool = SockIOPool.GetInstance(poolName);
//指定客户端访问的SockIO池
MClient.PoolName = poolName;
使用SocketIoPool的场景,假如你的系统中用到A,B两台机器memcached的缓存数据,而A,B是不相关的,没有数据互通共享,那么这个时候你就可以根据设置poolName来处理读写那台机器。而不用多处,重复配置客户端的各种参数。
四、memcached的故障转移处理
//设置SocktIO池的故障标志
pool.Failover = true;
memcached的鼓掌转移是一套正常节点发生故障变为死节点时的处理机制。
1、开启故障转移:如果发生socket异常,则该节点被添加到存放死节点属性的_hostDead中,新请求被映射到dead server,检测尝试连接死节点的时间间隔属性_hostDeadDuration(默认设置为100ms),如果没有达到设定的间隔时间则key会被映射到可用的server处理,如果达到了时间间隔,则尝试重新链接,连接成功将此节点从_hostDead中去除,连接失败则间隔时间翻倍存放,下次重新连接时间会被拉长。
2、不开启故障转移:新的请求都会被映射到dead server上,尝试重新建立socket链接,如果连接失败,返回null或者操作失败。
五、key-value中的key与value
1、key在服务端的长度限制为250个字符,建议使用较短的key但不要重复。
2、value的大小限制为1mb,如果大拉,可以使用压缩,如果还大,那可能拆分到多个key中。