千家信息网

怎么分析ZooKeeper分布式任务调度中心

发表于:2024-11-14 作者:千家信息网编辑
千家信息网最后更新 2024年11月14日,怎么分析ZooKeeper分布式任务调度中心,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。一: 背景软件系统中,定时任务往往不可或缺,大
千家信息网最后更新 2024年11月14日怎么分析ZooKeeper分布式任务调度中心

怎么分析ZooKeeper分布式任务调度中心,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。

一: 背景

软件系统中,定时任务往往不可或缺,大家可能会采用Spring quartz 建立定时任务模块。 当任务模块进行了分布式部署,通常会出现定时任务重复执行的情况。 怎么避免这种情况呢,是否可以构建一个任务注册中心,Quartz负责注册任务,但不具体执行任务内的业务逻辑。

任务注册中心解决任务重复注册的问题,同时将任务分配给若干处理器进行具体的业务处理,保证在同一个时间内,一个任务只会被一个处理器进行处理。如下图



二:任务注册中心与调度中心

采用ZooKeeper的客户端框架Curator, 利用ZooKeeper的Master选举机制实现。 注册任务就相当于在ZooKeeper中创建或更新一个节点。通过更新节点的内容,来记录任务的执行状态。

三:代码模拟

  1. public class ZookeeperDemo5 {


  2. private static String PATH = "/zkbk2";

  3. private static String FINISH_FLAG="finish";


  4. private static CuratorFramework client = CuratorFrameworkFactory.builder()

  5. .connectString("10.243.3.18:2181,10.243.3.17:2181,10.243.3.27:2181").sessionTimeoutMs(5000)

  6. .retryPolicy(new ExponentialBackoffRetry(100, 3)).build();


  7. public static void main(String[] args) throws Exception {

  8. client.start();

  9. PathChildrenCache cache = new PathChildrenCache(client, PATH, true);

  10. cache.start(StartMode.POST_INITIALIZED_EVENT);


  11. cache.getListenable().addListener(new PathChildrenCacheListener() {


  12. @Override

  13. public void childEvent(CuratorFramework client, PathChildrenCacheEvent event) {

  14. switch (event.getType()) {

  15. case CHILD_ADDED:

  16. System.out.println("CHILD_ADDED," + event.getData().getPath());

  17. deal(event);

  18. break;

  19. case CHILD_UPDATED:

  20. System.out.println("CHILD_UPDATED," + event.getData().getPath());

  21. deal(event);

  22. break;

  23. case CHILD_REMOVED:

  24. System.out.println("CHILD_REMOVED," + event.getData().getPath());

  25. break;

  26. default:

  27. break;

  28. }

  29. }

  30. });


  31. Thread.sleep(Integer.MAX_VALUE);

  32. }





  33. private static void deal( PathChildrenCacheEvent event)

  34. {

  35. final LeaderLatch latch = new LeaderLatch(client, event.getData().getPath());


  36. latch.addListener(new LeaderLatchListener() {


  37. @Override

  38. public void notLeader() {

  39. }


  40. @Override

  41. public void isLeader() {

  42. try {

  43. System.out.println("======begin deal==========" + event.getData().getPath());


  44. String data = new String(client.getData().forPath(event.getData().getPath()));



  45. if (!data.contains("finish")) {

  46. Thread.sleep(10000L);

  47. System.out.println("");

  48. System.out.println("");

  49. System.out.println("**************************************");

  50. System.out.println("**************************************");

  51. System.out.println("**************************************");

  52. System.out.println("**************************************");

  53. System.out.println("");

  54. System.out.println("");

  55. client.setData().forPath(event.getData().getPath(), FINISH_FLAG.getBytes());

  56. }

  57. System.out.println("======finish deal==========" + event.getData().getPath());

  58. latch.close();

  59. }

  60. catch (Exception e) {

  61. e.printStackTrace();

  62. }

  63. }

  64. });

  65. try {

  66. latch.start();

  67. }

  68. catch (Exception e) {

  69. e.printStackTrace();

  70. }

  71. }

  72. }

看完上述内容,你们掌握怎么分析ZooKeeper分布式任务调度中心的方法了吗?如果还想学到更多技能或想了解更多相关内容,欢迎关注行业资讯频道,感谢各位的阅读!

0