Zookeeper 教程

分布式锁是控制分布式系统之间同步访问共享资源的一种方式。
下面介绍 zookeeper 如何实现分布式锁,讲解排他锁和共享锁两类分布式锁。

排他锁

排他锁(Exclusive Locks),又被称为写锁或独占锁,如果事务 T1 对数据对象 O1 加上排他锁,那么整个加锁期间,只允许事务 T1 对 O1 进行读取和更新操作,其他任何事务都不能进行读或写。
定义锁:
/exclusive_lock/lock
实现方式:
利用 zookeeper 的同级节点的唯一性特性,在需要获取排他锁时,所有的客户端试图通过调用 create () 接口,在 /exclusive_lock 节点下创建临时子节点 /exclusive_lock/lock,最终只有一个客户端能创建成功,那么此客户端就获得了分布式锁。同时,所有没有获取到锁的客户端可以在 /exclusive_lock 节点上注册一个子节点变更的 watcher 监听事件,以便重新争取获得锁。

共享锁

共享锁(Shared Locks),又称读锁。如果事务 T1 对数据对象 O1 加上了共享锁,那么当前事务只能对 O1 进行读取操作,其他事务也只能对这个数据对象加共享锁,直到该数据对象上的所有共享锁都释放。
定义锁:
/shared_lock/[hostname]-请求类型W/R-序号
实现方式:
1、客户端调用 create 方法创建类似定义锁方式的临时顺序节点。
Zookeeper 分布式锁实现原理 - 图1
2、客户端调用 getChildren 接口来获取所有已创建的子节点列表。
3、判断是否获得锁,对于读请求如果所有比自己小的子节点都是读请求或者没有比自己序号小的子节点,表明已经成功获取共享锁,同时开始执行度逻辑。对于写请求,如果自己不是序号最小的子节点,那么就进入等待。
4、如果没有获取到共享锁,读请求向比自己序号小的最后一个写请求节点注册 watcher 监听,写请求向比自己序号小的最后一个节点注册 watcher 监听。
实际开发过程中,可以 curator 工具包封装的 API 帮助我们实现分布式锁。

  1. <dependency>
  2. <groupId>org.apache.curator</groupId>
  3. <artifactId>curator-recipes</artifactId>
  4. <version>x.x.x</version>
  5. </dependency>

curator 的几种锁方案 :

  • 1、InterProcessMutex:分布式可重入排它锁
  • 2、InterProcessSemaphoreMutex:分布式排它锁
  • 3、InterProcessReadWriteLock:分布式读写锁

下面例子模拟 50 个线程使用重入排它锁 InterProcessMutex 同时争抢锁:

实例

  1. public class InterprocessLock {
  2. public static void main(String[] args) {
  3. CuratorFramework zkClient = getZkClient();
  4. String lockPath = "/lock";
  5. InterProcessMutex lock = new InterProcessMutex(zkClient, lockPath);
  6. // 模拟 50 个线程抢锁
  7. for (int i = 0; i < 50; i++) {
  8. new Thread(new TestThread(i, lock)).start();
  9. }
  10. }
  11. static class TestThread implements Runnable {
  12. private Integer threadFlag;
  13. private InterProcessMutex lock;
  14. public TestThread(Integer threadFlag, InterProcessMutex lock) {
  15. this.threadFlag = threadFlag;
  16. this.lock = lock;
  17. }
  18. @Override
  19. public void run() {
  20. try {
  21. lock.acquire();
  22. System.out.println("第"+threadFlag+"线程获取到了锁");
  23. // 等到 1 秒后释放锁
  24. Thread.sleep(1000);
  25. } catch (Exception e) {
  26. e.printStackTrace();
  27. }finally {
  28. try {
  29. lock.release();
  30. } catch (Exception e) {
  31. e.printStackTrace();
  32. }
  33. }
  34. }
  35. }
  36. private static CuratorFramework getZkClient() {
  37. String zkServerAddress = "192.168.3.39:2181";
  38. ExponentialBackoffRetry retryPolicy = new ExponentialBackoffRetry(1000, 3, 5000);
  39. CuratorFramework zkClient = CuratorFrameworkFactory.builder()
  40. .connectString(zkServerAddress)
  41. .sessionTimeoutMs(5000)
  42. .connectionTimeoutMs(5000)
  43. .retryPolicy(retryPolicy)
  44. .build();
  45. zkClient.start();
  46. return zkClient;
  47. }
  48. }

控制台每间隔一秒钟输出一条记录:
Zookeeper 分布式锁实现原理 - 图2