百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

分布式常用工具组件 distributed-tool

cac55 2024-10-20 04:21 13 浏览 0 评论

distributed-tool

项目介绍

这是一个分布式常用工具组件。其中包括但不限于:

分布式List、分布式Set、分布式Long、分布式信号量、分布式缓存、分布式锁、分布式序列号生成器、分布式订阅发布模式等常用工具类

目前微服务开发的系统很多,这个就涉及到分布式集群问题。像以前如果是单机,那么这些解决方案都可以使用JVM的API来实现

但在分布式环境下,这些API都不可用,所以急需一套分布式的API来支持这种常用操作,那么我来提供了,后面持续添加各种分布式常用工具类

注意:所有组件目前都是线程不安全,如果多线程请使用多实例,或者自己加同步锁

软件架构

目前项目分两个module,distributed-tool和distributed-tool-test。前者是核心源码。后者是测试代码。

distributed-tool主要分如下模块:分布式List、分布式Set、分布式Long、分布式信号量等

  1. core 提供基本分布式组件。(V1.3支持)
  2. cache 简单的分布式缓存模块。(V1.3支持)
  3. lock 分布式锁。(V1.3支持)
  4. pubsub 分布式订阅发布组件。(V1.3支持)
  5. sequence 分布式序列号生成器。(V1.3支持)

Maven引用

<dependency>
 <groupId>com.xuanner</groupId>
 <artifactId>distributed-tool</artifactId>
 <version>1.3</version>
</dependency>

使用教程

初始化(目前底层使用了Redis来实现,所以使用Redis方式初始化)

Dt.getInstance().initJedis("xxx", 8380, "xxx");

销毁(注意,在应用的结束生命周期上加上销毁代码,例如Spring的destroy周期)

Dt.getInstance().getDefaultJedisFactory().destroy();

一个分布式List使用例子

DtList list = Dt.newDtList("listName");
list.pushLeft(new String[] { "a", "b" });
list.popLeft();
list.close();//使用完毕记得close

一个分布式缓存锁使用例子

DtLock lock = Dt.newDtLock("lockName");
String kId = lock.tryLock();
//你的临界资源操作逻辑
lock.unLock(kId);
lock.close();//使用完毕记得close

核心分布式集合使用

原理说明

很多有用的组件,都基于核心的分布式集合来实现。例如:分布式List、分布式Queue、分布式Set等等。我这里也实现了一些基本的分布式合集和原子类。

分布式DtList

支持基本的push、pop操作

DtList list = Dt.newDtList("listName");
list.pushLeft(new String[] { "a", "b" });//从列表的左边push一个元素
String element = list.pushPop();//从列表的右边pop一个元素,这里element==a
//使用完后记得close
list.close();

分布式DtLong

支持分布式自增和自减去

DtLong dtLong = Dt.newDtLong("longName");
long l = dtLong.incr(1);
l = dtLong.decr(1L);
l = dtLong.getValue();
//使用完后记得close
dtLong.close();

分布式DeQueue

支持尾部push,头部pop,很容易就可以基于整个Queue实现一个简单的分布式队列(生产者消费者模式)

DtQueue queue = Dt.newDtQueue("queueName");
queue.push("eeee");
String eeee = queue.pop();
//使用完后记得close
queue.close();

下面是一个简单的生产者消费者实现案例

//消费者
final DefaultDtQueue consumer = new DefaultDtQueue("testName3");
consumer.setClientFactory(clientFactory);
new Thread(() -> {
 while (true) {
 String e = consumer.pop();
 sleep(1);
 System.out.println(e);
 }
}).start();
//生产者
final DefaultDtQueue provider = new DefaultDtQueue("testName3");
provider.setClientFactory(clientFactory);
new Thread(() -> {
 while (true) {
 provider.push("来一个时间戳:" + System.currentTimeMillis());
 sleep(3);
 }
}).start();

分布式DtSemaphore(信号量)

JDK自带的信号量大家都熟悉吧,整个是分布式的信号量,可以很方便的基于整个组件来做分布式控资源访问。 里面使用了Lua实现,绝对高校可靠。

DtSemaphore semaphore = Dt.newDtSemaphore("semaphoreName", 3);//这里限制同时只能访问3个资源
String sId1 = semaphore.acquire();
String sId2 = semaphore.acquire();
String sId3 = semaphore.acquire();
String sId4 = semaphore.acquire();//第四个就返回null表示拿不到信号量
semaphore.release(sId1);
String sId5 = semaphore.acquire();//因为上面释放了一个信号量,所以这里又可以拿到了
//这里注意,为了防止系统拿到信号量当机后无法释放信号量,每个背获取的信号量都有默认30S的超时时间
//如果过了30S你还没有释放,那么这个信号量就会默认背释放,如果要自己设定这个超时时间,你可以这样新建
//这里被设置成了60S,注意单位是:秒
DtSemaphore semaphore = Dt.newDtSemaphore("semaphoreName", 3, 60);
//使用完后记得close
semaphore.close();

分布式DtSortedSet(可排序Set)

首先他是一个Set集合,且他支持设置score进行排序

DtSortedSet set = Dt.newDtSortedSet("setName");
set.add(1, "a1");
set.add(20, "a20");
set.add(99, "a99");
//获取指定值的排位
long rank = set.rank("a20");//这里rank==1
//可以根据score的范围进行批量删除
set.removeByScoreRange(1, 98);//这里值"a1"和"a20"会被删除 
//使用完后记得close
set.close();

更多使用教程: https://gitee.com/xuan698400/distributed-tool/wikis/

相关推荐

14款健身APP蹿红 看看下载最多的是哪款?

Zombies,Run!($3.99,安卓,iOS)如果你的运动理念是:除非有人追,否则绝不跑起来,那么这款APP应该适合你。Zombies,Run!这款程序把单调的跑步过程变身为躲避僵尸的游戏...

微软官方彩蛋庆祝《回到未来》纪念日

2015年10月21日,是MartyMcFly和Brown博士回到未来的时间。现在,这一天真的到了,那么当时影片中展示的一些科技产品究竟有多少实现了呢?作为一家走在技术前沿的公司,日前,微软就在M...

时尚圈最潮同志情侣 帅到没朋友(同志情侣微信头像)

来源:MSN时尚综合|2015-03-0419:45:15男演员ZacharyQuinto(中)与男模MilesMcMillan(右)于纽约街头公开热吻。情人节这个拥有不同起源传说,最早可以...

IE浏览器阻止过期ActiveX控件或将影响网银的使用

IE浏览器网银IE浏览器网银如果经常使用IE浏览器浏览网页的用户,可能都有遇到过浏览器窗口提示安装ActiveX控件的情况,一般情况下用户也是会选择直接安装。ActiveX控件广义上是指微软公司的整...

如何使Microsoft Band连接到WP设备

如果你幸运地购买到了MicrosoftBand,那么恭喜你。现在我们(winbeta)推出了“帮助系列”,那些尚未买到MicrosoftBand的朋友可以了解设备的一些新功能,以及设备的其他关键特...

毕业生不得不看的五大骗局全揭秘(毕业生防骗)

目前,距离高校大学生毕业已不足100天,大部分毕业生都十分忙碌。论文定稿、答辩,参加招聘、面试等成了应届毕业生的头等大事。但随着毕业季的临近,不法分子专门针对毕业生的诈骗高发期也随之来临。360手机安...

菠萝觅生活是O2O应用流量入口最大的供应商

现在主流的传统O2O生活服务,他们其实都有一个共通点,那就是各行其道。打车有快的,滴滴,外卖有饿了么,买机票有去哪儿网…每个APP都有着自己的核心竞争力。而用户呢?既想拥有海量有趣应用,又担心占用过多...

WP8.1版MSN健康应用,现已支持锁屏计步

IT之家(www.ithome.com):WP8.1版MSN健康应用,现已支持锁屏计步@WP之家报道,微软今天已将必应系列应用品牌归为MSN,除此之外,WP8.1版MSN健康和天气应用也获得一些新的...

短信就能传播手机病毒?看完推理惊呆了!

很多人都收到过一种带网址的陌生短信,有的人会点击网址看看,有的还会在好奇心驱使下回复短信。近日《北京新发现》栏目报道了一起离奇的电信诈骗案,事主耿先生的银行卡从未离身,但是在收到一条带网址的陌生短信,...

微软OneClip:我承包了你的剪贴板(微软onedrive云空间)

不久前,Twitter用户WalkingCat曝光了微软一款名为OneClip的应用。这是一款剪贴板应用,根据描述这款应用将覆盖Windows10(包括桌面和移动)、iOS和Android平台,可以...

Windows 10手机应该是什么样?微博用户给出了概念图

随着Windows10发布的不断临近,WindowsPhone的用户对Windows10的旗舰手机的期望也越来越高,我们WP中文网也在微博上发出了同样的问题,搜集用户对Windows10的硬...

云管家出席武汉2015年支付宝O2O生态峰会

2月4日,蚂蚁金服O2O生态峰会在武汉启幕。此次峰会展现了2015年蚂蚁金服在O2O领域的开放思路和策略,以及合作伙伴对O2O的创新观念及思路分享,吸引了武汉近3000名企业大佬、众多创业者、第三方服...

微软将于下周开启Windows开发中心帐号迁移工作

自下周开始微软将启动Windows开发中心的帐号迁移工作。根据WindowsBuildingApps博客透露Windows开发中心帐号迁移工作将会分为几个阶段。首个阶段从下周开始持续到今年7月份...

如何解绑已经合并的MSN账户和Skype账户?

如果您绑定的账户已经充值,建议您把产品消耗完毕后,再进行解绑。当您需要解绑合并的账户时,可登入Skype点卡账户自助操作。输入Skype或MSN账号、密码登录账户:登录后,可在页面左下角选择语言"中文...

微博账号已显示所属MCN机构,成为目前第二个上线该功能的平台

7月25日,多位网友发现,部分微博大V的个人主页已经显示其所属的MCN机构名称,微博也成为目前第二个上线该功能的平台。【来源:中新经纬】声明:此文版权归原作者所有,若有来源错误或者侵犯您的合法权益,您...

取消回复欢迎 发表评论: