设计网站物理结构怎么做,厦门建设局领导,汕头网站建设方案推广,购物型网站模板简介 dledger是openmessaging的一个组件#xff0c; raft算法实现#xff0c;用于分布式日志#xff0c;本系列分析dledger如何实现raft概念#xff0c;以及dledger在rocketmq的应用
本系列使用dledger v0.40
本文分析dledger的架构#xff0c;核心组件#xff1b;rpc组… 简介 dledger是openmessaging的一个组件 raft算法实现用于分布式日志本系列分析dledger如何实现raft概念以及dledger在rocketmq的应用
本系列使用dledger v0.40
本文分析dledger的架构核心组件rpc组件
关键词
Raft
Openmessaging
参考资料
In Search of an Understandable Consensus Algorithm raft论文简版
技术架构 应用/client client是dledger提供给应用访问节点的组件rpc服务
rpc服务内置rpc client/rpc server对外接收外部rpc访问包括client和节点间通讯对内解释rpc请求转发给Server对外发送rpc请求到其他节点
Server
主程序负责节点启动其他组件的启动写入日志请求初步处理等
Elector
选举类负责集群主节点选举
EntryPusher
日志写入器内置分发器和处理器分发器主节点用于复制日志到跟随者处理器跟随者使用写入日志
存储
存储日志条木有两个实现基于内存和基于文件
快照/状态机
新版本的dledger提供状态机dledger成为通用的raft组件不再是转为rocketmq使用
启动
本节分析节点启动下图是典型的dledger启动代码 构建和初始ServerServer代表节点注册状态机若需要的话注册自定义的处理器扩展rpc服务若有的话Metrics组件初始化启动server Server启动负责启动核心组件 6. 优雅关机
rpc
本节介绍dledger的rpc模块dledger选主日志写入和复制通过来来回回的rpc完成本节介绍dledger业务层面的rpc设计
节点间通讯 上图节点间通讯模型
RaftProtocol/RaftProtocolHanlder raft服务接口/处理器接口raft服务接口定义外部包括client和节点间访问接口处理器定义raft处理服务接口
ClientProtocol/ ClientProtocolHanlder 日志服务接口/处理器接口日志服务接口定义外部包括client和节点间访问接口处理器定义日志处理服务接口
RpcService 内置rpc client/rpc server 对内使用NettyRemotingServer接收rpc请求解释rpc请求转发给Server对外使用NettyRemotingClient发送rpc请求到其他节点
Server handler的真正实现者
技术架构图很直观的展示rpc调用关系
客户端通讯 Client组件是应用用于集成dledger应用可使用client组件访问集群
MetadataUpdate 定时更新leaderId让Client访问领导者节点
DLedgerClientProtocol 定义了访问集群的接口
扩展机制
Dledger提供rpc扩展机制通过增加rpc处理器DLedgerRpcService提供方法注册用户定义处理器 系列文章
架构核心组件和rpc组件 完成心跳和选举 TBD日志写入/复制和存储 包括日志写入和复制日志存储组件集成rocketmq rocketmq使用dledger实现消息存储复制broker控制器 元数据复制快照/状态机集群成员变更 成员变更管理节点的上线下线发现dledger v0.4未实现但计划中未来版本实现jraft “double check” 多重分析jraft比较忠实实现了raft算法在dledger基础上再研究jraft对raft更深入的认识
