xcache 分布式缓存组件

程序名称:xcache

授权协议: Apache

操作系统: 跨平台

开发语言: Java

xcache 介绍

微服务时代,我们一般会用分布式缓存在提高系统的并发能力。 例如使用memcached、redis等比较知名的。但是很多时候,
作为普通业务程序员,他们可能在写业务的时候,并不想关心底层到底用的是memcached还是redis。
而且常用的缓存策略最好也是能够封装在缓存组件里面,供业务程序员使用。 这就是我封装这个组件的初衷。后面会慢慢支持各种实现,供使用者实现。

组件分两个模块:

  1. client模块,对底层使用哪种缓存框架进行屏蔽封装。例如,目前支持memcached的spy客户端和xmemcached客户端。

  2. cache模块,在client的基础上加了一些缓存策略,例如:同步设置缓存策略、异步设置缓存策略(防缓存击穿和缩短RT时间)等

其中特别说明cache模块的两种策略:同步设置策略、异步设置策略
(1)同步设置策略
比较常见的做法,当get缓存时,如果缓存不存在或者缓存过期,那么就回源到DB获取数据,并
设置缓存,最后返回数据,这些步骤都在主线程中操作完成,简单明了,但有个缺点,存在缓存 击穿风险,当缓存过期时,由于要同时查询DB并设置缓存,RT会较长。
(2)异步设置策略
当get缓存时,如果缓存不存在,那按同步策略走,当缓存存在但是过期时,主线程先返回过期缓存
数据,再另起线程,查询DB,更新缓存,这中间会判断是否有同key的缓存正在设置,保证同一时间
不会出现多请求同key重复设置。这种方案,单机避免了缓存击穿风险,当缓存过期,RT也短,缺点
就是会有额外的线程池耗资源,还有就是缓存过期时,那一瞬间返回的时过期的数据。

  1. V1.0支持memcached客户端的实现(spy、xmemcached都支持)
<dependency>
    <groupId>com.xuanner</groupId>
    <artifactId>xcache-core</artifactId>
    <version>1.0</version>
</dependency>
  1. client模块的API使用:

    /*
     * 获取spy客户端
     *  * @return
    /
    public static CacheClient getSpyClient() {
        SpyClientConfig config = new SpyClientConfig();
        config.setHost(“xxx”);
        config.setPort(11211);
        config.setUsername(“xxx”);
        config.setPassword(“xxx”);
        return new CacheClientBuilder().config(config).build();
    }

    /*
     * 获取xmemcached客户端
     *  * @return
    /
    public static CacheClient getXmemcacheClient() {
        XMemcachedClientConfig config = new XMemcachedClientConfig();
        config.setHost(“xxx”);
        config.setPort(11211);
        config.setUsername(“xxx”);
        config.setPassword(“xxx”);
        return new CacheClientBuilder().config(config).build();
    }

    public class ClientTest {

    private CacheClient cacheClient;

    @Before
        public void setup() {
            cacheClient = getSpyClient();
        }

    @Test
        public void test() {
            //删除
            cacheClient.delete(“testKey”);
            //设置
            cacheClient.put(“testKey”, “testValue”, 2000, TimeUnit.MILLISECONDS);
            //获取
            String testValue = (String) cacheClient.get(“testKey”);
        }

    }

  2. cache模块的API使用:

    /*
     * 缓存的全局配置,一般一个应用一个配置,可以用全局版本号控制全缓存失效
     *  * @return
    /
    public static GlobalCacheConfig getGlobalCacheConfig() {
        GlobalCacheConfig globalCacheConfig = new GlobalCacheConfig();
        globalCacheConfig.setAppName(“xuannerApp”);
        globalCacheConfig.setAppCacheVersion(1);
        return globalCacheConfig;
    }

    /*
     * 缓存的模块配置,表示需要缓存的一类数据,例如一个电商有商品数据,类目数据等,可以用模块的版本控制本模块的缓存失效
     *  * @return
    /
    public static ModuleCacheConfig getModuleCacheConfig() {
        ModuleCacheConfig moduleCacheConfig = new ModuleCacheConfig();
        moduleCacheConfig.setCacheName(“itemData”);
        moduleCacheConfig.setCacheVersion(1);
        moduleCacheConfig.setExpTime(2000);//超时时间
        return moduleCacheConfig;
    }

    /*
     * 当缓存不存在或者过期时,需要回源到DB查询时的查询接口
     *  * @return
    /
    public static CacheLoader getCacheLoader() {
        return new CacheLoader() {

    @Override
            public Map loadData(Collection keys) {
                System.out.println(“多个loader…”);
                Map key2DataMap = new HashMap<>();
                keys.forEach(key -> key2DataMap.put(key, key + “_data”));
                return null;
            }

    @Override
            public String loadData(String key) {
                System.out.println(“单个loader…”);
                return key + “_data”;
            }
        };
    }

    /*
     * 构建一个缓存
     *  * @param strategy
     * @return
    /
    public static Cache getCache(String strategy) {
        return new CacheBuilder().setCacheClient(getSpyClient()).setCacheLoader(
                getCacheLoader()).setGlobalCacheConfig(getGlobalCacheConfig()).setModuleCacheConfig(
                getModuleCacheConfig()).build(strategy);
    }

    public class CacehTest {

    private Cache cache;

    @Before
        public void setup() {
            //ASYNC表示异步设置缓存策略,SIMPLE表示同步设置缓存策略
            cache = getCache(CacheBuilder.ASYNC);
        }

    @Test
        public void test() {
            //删除缓存
            cache.delete(“testKey”);

            //获取缓存,当缓存不存在,会触发CacheLoader接口获取数据,并自动设置缓存,返回结果
            cache.get(“testKey”);

            //设置缓存,会触发CacheLoader接口获取数据,并自动设置缓存
            cache.set(“testKey”);
        }
    }

  1. 姓名:徐安

  2. 邮箱:javaandswing@163.com

  3. QQ:349309307

  4. 个人博客:xuanner.com

xcache 官网

https://gitee.com/xuan698400/xcache

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


BlazeDS 是一个基于服务器的Java 远程控制(remoting)和Web消息传递(messaging)技术, 它能够使得后端的Java应用程序和运行在浏览器上的Adobe
OVal 是一个可扩展的Java对象数据验证框架,验证的规则可以通过配置文件、Annotation、POJOs 进行设定。可以使用纯 Java
Volta 是一套开发工具,专为开发分布式、实时系统应用。它包括级联,控制流分析工具,
OpenDDS 是一个开源的 C++ 实现的 对象管理组织 OMG 的 数据分布式服务 (DDS) 。OpenDDS利用自适应通信环境(ACE)提供一个跨平台的环境。
JADE (Java Agent DEvelopment Framework) 是一个完全用Java语言实现的软件框架。它通过一个兼容 FIPA
FastMM ,在D2006和2007中已代替了原来的内存管理器。
WebRTC 是一项在浏览器内部进行实时视频和音频通信的技术,是谷歌于2010年以6820万美元收购VoIP软件开发商 Global IT
gwtwiki - The Java Wikipedia API (Bliki engine),是一个 Wikipedia/Mediawiki 语法解析器,可以把 wiki 的文本转换成 HTML。它支持 wiki 标签,例如 bold, italic, headers, nowiki,
Esper 是一个复杂事件处理组件(CEP - Complex Event Processing),它有 Java 版本和 .NET 版本(NEsper)。
LuaTinker 的作者是Kwon-il Lee韩国人写的,最新的版本是0.2.C,这个C++ wrapper For Lua能够方便和
各种语言环境下gitignore文件的一个集合。
简介 ContentExtractor 是一个开源的网页正文抽取工具,用JAVA实现,具有非常高的抽取精度。
SwiftRandom 是一组函数集合,可以从不同的分布生成伪随机变量。 使用示例: //Single pseudorandom normal variable
java-linq-examples 是 101 个 LINQ 示例的 Java 移植版本。Android 兼容 Java 1.7. 此外还有以下语言移植版本:
mal,Make a Lisp,顾名思义,用图灵完备的编程语言写 Lisp 交互器,目前已经有35种不同语言的实现:
一个 Go 语言实现的中国行政区划查询工具。 介绍 最新中国行政区划,数据来源:http://www.stats.gov.cn/tjsj/tjbz/xzqhdm/201608/t20160809_1386477.html
Teaf 简介 Tencent Easy ACE Framework,基于 ACE 的高性能轻量级服务框架,单进程多线程模型,支持 select/epoll 等多种网络
介绍 让 Guzzle 支持 Swoole 协程,这个项目目的就是这么简单明了! Guzzle-Swoole 是 Guzzle 的处理器(Handler),并没有对 Guzzle 本身代码进行修改,理论上可以兼容后续版本。
goproxy-shell goproxy服务端部署脚本 使用方法 wget --no-check-certificate https://github.com/sjz123321/goproxy-
1. pyMd2Doc介紹(pip版本) 利用python将markdown转换成带可收缩、可跳转到文本内容的目录文档。