zoukankan      html  css  js  c++  java
  • 【实践】Memcached实例解析

    关于Memcached

    Memcached是一个自由开源的,高性能分布式内存对象缓存系统。 Memcached是一种基于内存的Key-Value存储,用来存储小块的任意数据(字符串、对象)。这些数据可以是数据库调用、API调用或者是页面渲染的结果。 Memcached简洁而强大。它的简洁设计便于快速开发,减轻开发难度,解决了大数据量缓存的很多问题。它的API兼容大部分流行的开发语言。 本质上,它是一个简洁的key-value存储系统。 一般的使用目的,是通过缓存数据库查询结果,减少数据库访问次数,以提高动态Web应用的速度、提高可扩展性。

    Memcached特征

    Memcached作为高速运行的分布式缓存服务器,具有以下的特点。

    • 协议简单
    • 基于libevent的事件处理
    • 内置内存存储方式
    • Memcached不互相通信的分布式

    Memcached的分布式部署极其简单,通常较小的应用一台Memcached服务器就可以满足需求,但是大中型项目可能就需要多台Memcached服务器了,这就牵涉到一个分布式部署的问题。对于多台Memcached服务器,怎么确定一个数据应该保存到哪台服务器呢?有两种方案,一是普通Hash分布,二是一致性Hash分布。普通Hash分布对于Memcached服务器数量固定的情况推荐使用,比较简单。但是当服务器数量发生改变时,问题就出来了。因为同一个KEY经Hash算法处理后,与服务器数量取模,会导致结果与服务器数量未变化时不同,这就导致之前保存的数据丢失。采取一致性Hash分布可以有效的解决这个问题,把丢失的数据减到最小(注意这里并没有说完全不丢失)。

    Memcached实际运用

    下面通过一个简单的实例来说明Memcached的高性能,以及Memcached是如何工作的。数据源采用的是随机生成的1500万条记录,通过控制台程序来模拟用户登录的业务逻辑,如果首次登录成功,则把用户信息写入Memcached缓存中,再次登录时即可从缓存中取得用户信息进行验证。以下是详细代码过程:

    数据操作接口:

     1 namespace MemcachedLibrary
     2 {
     3     interface IDataOperator
     4     {
     5         //获取数据库连接
     6         SqlConnection OpenConnection();
     7         //获取用户信息
     8         void GetUserInfo(string user, string pass);
     9     }
    10 }

    具体的登录业务操作:

     1 public class SQLDataOperator : IDataOperator
     2     {
     3         //数据库连接串
     4         private const string connectKey = "server=DESKTOP-ALQLV05;database=db_TencentEmailInfo;uid=sa;pwd=";
     5 
     6         //标记变量,标记是否已经缓存
     7         private bool IsMemcachedFinished = false;
     8 
     9         //获取用户信息
    10         public void GetUserInfo(UserInfo user)
    11         {
    12             Stopwatch memcachedWatch = new Stopwatch();
    13             memcachedWatch.Start();
    14 
    15             //从Memcached中取得数据,初始化SockIOPool
    16             SockIOPool pool = MemcachedMain.MemcachedInitialize();
    17             MemcachedClient client = MemcachedMain.GetMemcachedInstance();
    18             //检查Memcached是否缓存了User信息
    19             if (client.KeyExists("user") && client.KeyExists("pass"))
    20             {
    21                 if (user.User == client.Get("user").ToString() && user.Pass == client.Get("pass").ToString())
    22                 {
    23                     Debug.WriteLine("登录成功!已从Memcached中取得用户信息!");
    24                 }
    25                 IsMemcachedFinished = true;
    26             }
    27             memcachedWatch.Stop();
    28             Debug.WriteLine("Memcached取得用户信息耗时:" + memcachedWatch.ElapsedMilliseconds + "毫秒");
    29 
    30             //如果Memcached中已经缓存User信息,则无需到数据库中检索数据,提高性能
    31             if (IsMemcachedFinished)
    32             {
    33                 return;
    34             }
    35 
    36 
    37             //如果Memcached中没有缓存过数据,则从数据库中取得数据,并将结果缓存到Memcached
    38             Stopwatch databaseWatch = new Stopwatch();
    39             databaseWatch.Start();
    40             SqlConnection con = OpenConnection();
    41             string cmdsql = string.Format("select * from tb_emailInfo where email='{0}' and classCode='{1}' ", user.User, user.Pass);
    42             using (SqlCommand cmd = new SqlCommand(cmdsql, con))
    43             {
    44                 DataTable tb = new DataTable();
    45                 SqlDataAdapter sda = new SqlDataAdapter(cmd);
    46                 sda.Fill(tb);
    47                 Debug.WriteLine("登录成功!已从数据库中取得用户信息!已查询到人数:" + tb.Rows.Count);
    48                 if (tb.Rows.Count > 0)
    49                 {
    50                     client.Set("user", user.User, DateTime.Now.AddMinutes(30));//Set中的第三个参数是指定缓存过期时间
    51                     client.Set("pass", user.Pass, DateTime.Now.AddMinutes(30));
    52                 }
    53             }
    54             databaseWatch.Stop();
    55             Debug.WriteLine("数据库取得用户信息耗时:" + databaseWatch.ElapsedMilliseconds + "毫秒");
    56         }
    57 
    58         public SqlConnection OpenConnection()
    59         {
    60             SqlConnection conn = new SqlConnection(connectKey);
    61             {
    62                 conn.Open();
    63                 Debug.WriteLine(conn.State);
    64                 return conn;
    65             }
    66         }

    下面的代码是在控制台调用的过程:

     1 class Program
     2     {
     3         static void Main(string[] args)
     4         {
     5            
     6             while (true)
     7             {
     8                 UserInfo userInfo = new UserInfo();//只存储了用户名和密码属性的实体
     9                 Console.WriteLine("请输入测试用户:");
    10                 userInfo.User = Console.ReadLine();
    11                 Console.WriteLine("请输入测试密码:");
    12                 userInfo.Pass = Console.ReadLine();
    13 
    14                 SQLDataOperator sqlDO = new SQLDataOperator();
    15                 Stopwatch watch = new Stopwatch();
    16                 watch.Start();
    17                 sqlDO.GetUserInfo(userInfo);
    18                 watch.Stop();
    19 
    20             }
    21         }
    22     }

    最后的运行结果截图如下:

    图一

    图二

    图三

    图四

    本文的实例是将用户信息以字符串的形式缓存起来并提供检索,其实也可以直接把UserInfo实体对象缓存到Memcached中,取出来后进行转化即可,前提是Userinfo需要有序列化关键字serializable关键字。后面有时间在更新下Memcached缓存实体的实例。

    参考资料:

    http://www.runoob.com/memcached/memcached-tutorial.html  Memcached详细教程

    https://blog.phpha.com/backup/archives/1303.html  Memcached分布式部署

     

     作者:悠扬的牧笛

     博客地址:http://www.cnblogs.com/xhb-bky-blog/p/5782444.html

     声明:本博客原创文字只代表本人工作中在某一时间内总结的观点或结论,与本人所在单位没有直接利益关系。非商业,未授权贴子请以现状保留,转载时必须保留此段声明,且在文章页面明显位置给出原文连接。

  • 相关阅读:
    读 《异类》- 作者:[加拿大] 马尔科姆·格拉德威尔 有感
    docker常用操作命令
    MySQL 使用规范
    js 字符串转json对象
    Mybatis 工作原理
    JDBC连接配置
    Java 线程基础
    数组与链表
    Java 内部类
    MySQL 去重
  • 原文地址:https://www.cnblogs.com/xhb-bky-blog/p/5782444.html
Copyright © 2011-2022 走看看