XXL-JOB 是基于mysql的分布式任务调度系统,是中心化调度的,包括调度中心和执行器
调度中心负责调度任务,执行器接受调度执行任务
执行器会注册到调度中心,调度中心也有自己的后台可以配置执行器配置任务,可以小流量调试任务,可以随开随停任务。
调度中心支持多节点...
汪明鑫
3年前 (2021-12-28) 1230浏览 0评论
4喜欢
Elastic Job实践
在上篇文章,我准备了ZK环境、Mysql环境,跑了Spring Boot整合Elastic Job的例子
今天从原理和源码层面更进一步学习Elastic Job, Elastic Job依赖ZK注册任务信息、任务实例,并且会把任务对应的分片也存储在...
汪明鑫
3年前 (2021-12-27) 730浏览 0评论
0喜欢
Kafka部署
参考之前的文章,搭建单机伪分布式ZK集群和Kafka集群
10分钟搭建单机伪分布式ZK集群
10分钟搭建单机伪分布式Kafka集群
搞事情的过程中遇到过2问题,有点恶心
Java客户...
汪明鑫
3年前 (2021-12-16) 862浏览 0评论
3喜欢
创建一个kafka目录
mkdir kafka
cd kafka
wget https://archive.apache.org/dist/kafka/1.1.0/kafka_2.11-1.1.0.tgz
拷贝3份kafka配置文件
[root@xinyes...
汪明鑫
3年前 (2021-12-13) 1054浏览 0评论
0喜欢
直接开始搞
mkdir zk
cd zk
wget https://archive.apache.org/dist/zookeeper/zookeeper-3.4.9/zookeeper-3.4.9.tar.gz
tar -zxvf zookeeper-3.4.9.tar....
汪明鑫
3年前 (2021-12-03) 708浏览 0评论
0喜欢
想到最狠的删除文件就是 rm -rf
然后可气的是这次居然没行通
实例上出现了一些乱码文件,其他几个都通过 rm -rf 清理干净了
就剩下最后一个怎么删也删不掉
后来用一手 find -inum xxx -delete 成功删除
注意:此方法只适用...
汪明鑫
4年前 (2021-11-11) 742浏览 0评论
5喜欢
先贴上我精心制作的kafka架构图
然后开始用大白话去聊聊我眼里的Kafka
首先介绍的是kafka 外部依赖的 分布式协调服务Zookeeper,大家一般简称ZK
协调服务顾名思义做调解员的,那么kafka需要协调什么呢?
当然是协调broker成...
汪明鑫
4年前 (2021-11-10) 819浏览 0评论
0喜欢
系统A调用系统B如何保证分布式事务
业内的操作好多都靠同步调用 + 异步扫表补偿来做
大家都知道rpc的调用有三态,明确返回成功,明确返回失败,中间态
系统A 创建红包 init 状态
同步调用 B系统扣款,扣款明确返回成功
系统A 修改红包状态为...
汪明鑫
4年前 (2021-08-31) 662浏览 0评论
0喜欢
最近出了2次故障,回过头来还是有多地方值得思考的,简单总结下避免以后再出类似的问题。
除了这2次产生资损的故障,之前还出过几次线上问题。
出现的几个问题中,蛋疼的是有2个都是重复出现过的问题。
有一个规律是欠的债迟早要还的,尤其是技术债。。。
之前出的某一个问题,如...
汪明鑫
4年前 (2021-08-31) 716浏览 0评论
1喜欢
Elastic Job是依托于ZK的非中心化分片定时任务框架
本文我们简单了解下分布式调度的概念和理念,以及初步学习Elastic Job
可以先看下文
定时任务的4种实现方式
分布式任务调度概述
为什么需要分布式任务?
JDK、Spring 提供...
汪明鑫
4年前 (2021-07-22) 819浏览 0评论
4喜欢