JAVA中使用redis+protoStuff实现数据库缓存机制

来源:互联网 发布:大数据平台的架构 编辑:程序博客网 时间:2024/04/29 14:05
  1. Redis介绍
       redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)和zset(有序集合)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操作都是原子性的。在此基础上,redis支持各种不同方式的排序。与memcached一样,为了保证效率,数据都是缓存在内存中。区别的是redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件,并且在此基础上实现了master-slave(主从)同步。 
    Redis是一个高性能的key-value数据库。redis的出现,很大程度补偿了memcached这类keyvalue存储的不足,在部 分场合可以对关系数据库起到很好的补充作用。它提供了Python,Ruby,Erlang,PHP客户端,使用很方便。
    Redis 目前并没有专门的数据类型用来存储对象,但我们可以通过对象序列化将对象转换成二进制文件来进行存储。
    JDK本身对对象提供了序列化方法,即实现序列化接口Serializable,并使用ObjectOutputStream 来输出二进制流,但这种方式性能很低,且跨语言性差。
    xml其实也属于一种序列化技术,xml的优点是可读性好,扩展性强,但相对来说xml结构比较冗余,解析比较复杂,性能也不高.
    我们也可以自己定义字符串格式,这样对于简单的数据格式比较高效,但可扩展性差,且无法应对复杂的对象。
    Google Protocol Buffer 又简称protobuf,它是谷歌开发的一种高效的结构化数据存储格式,这种序列化的协议非常轻便高效,但protobuf需要我们自行编写schema,这一点是比较麻烦的。
    针对protobuf,开源中国编写了一套动态生成schema的序列化格式,它的性能与protobuf差别不大,但是不需要我们自己来写schema比较方便,下面使用redis+protostuff实现简单的数据库缓存
    Jedis是Redis官方指定的Java客户端Redis开发包。这里我们使用Jedis来连接Redis数据库.
    Jedis下载 protostuff下载
package org.seckill.dao.cache;import io.protostuff.LinkedBuffer;import io.protostuff.ProtobufIOUtil;import io.protostuff.runtime.RuntimeSchema;import org.seckill.entity.Seckill;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import org.springframework.stereotype.Repository;import redis.clients.jedis.Jedis;import redis.clients.jedis.JedisPool;/** * Created by Administrator on 2017/4/29. * Seckill-->进行序列化的对象 */@Repositorypublic class RedisDao {    private final JedisPool jedisPool;    private final Logger logger = LoggerFactory.getLogger(this.getClass());    //动态生成的Seckill的schema    private RuntimeSchema<Seckill> schema = RuntimeSchema.createFrom(Seckill.class);    public RedisDao(String ip, int port) {        //构造方法建立Jedis连接池        jedisPool = new JedisPool(ip, port);    }    public Seckill getSeckill(long seckillId) {        //redis操作逻辑        try {            //获取Jedis连接            Jedis jedis = jedisPool.getResource();            try {                String key = "seckill:" + seckillId;                //redis并没有实现内部序列化操作                //get->byte[]->反序列化->Object(Seckill)                //采用自定义序列化 protostuff --> POJO对象                //从Jedis中获取序列化的字节数组                byte[] bytes = jedis.get(key.getBytes());                if (bytes != null) {                    //声明一个空对象                    Seckill seckill = schema.newMessage();                    //将Redis中获取的字节数组转化成Seckill对象并赋给seckill                    ProtobufIOUtil.mergeFrom(bytes, seckill, schema);                    //seckill被反序列化                    return seckill;                }            } finally {                //关闭连接                jedis.close();            }        } catch (Exception e) {            logger.error(e.getMessage(), e);        }        return null;    }    public String putSeckill(Seckill seckill) {        //Set Object(seckill) --> 序列化 --> byte[]        try {            Jedis jedis = jedisPool.getResource();            try {                String key = "seckill:" + seckill.getSeckillId();                //将seckill对象通过动态生成的schema转换成字节数组                //LinkedBuffer用于缓存较大的对象                byte[] bytes = ProtobufIOUtil.toByteArray(seckill, schema,                        LinkedBuffer.allocate(LinkedBuffer.DEFAULT_BUFFER_SIZE));                //超时缓存                //Redis存储数据可以是永久的或是时限的                //对于数据库缓存来说,一般使用超时机制来保证数据缓存与数据库数据的完整性                int timeout = 60*60;                String result = jedis.setex(key.getBytes(),timeout,bytes);                return  result;            } finally {                jedis.close();            }        } catch (Exception e) {            logger.error(e.getMessage(), e);        }        return null;    }}
思路:  1.查找数据时,首先向Redis缓存中查找.  2.如果找不到,就转向数据库中查找.      2.1将查找到的数据放进Redis缓存中  3.返回查找到的对象
1 0
原创粉丝点击