leesf

2017年3月1日

摘要：一、前言前面介绍了ServerCnxn，下面开始学习NIOServerCnxn。二、NIOServerCnxn源码分析 2.1 类的继承关系说明：NIOServerCnxn继承了ServerCnxn抽象类，使用NIO来处理与客户端之间的通信，使用单线程处理。 2.2 类的内部类 1. Send 阅读全文

posted @ 2017-03-01 17:22 leesf 阅读(2717) 评论(0) 推荐(3) 编辑

2017年2月28日

【Zookeeper】源码分析之网络通信（一）

摘要：一、前言前面已经分析了请求处理链中的多数类，接着继续分析Zookeeper中的网络通信模块。二、总体框图对于网络通信模块，其总体框图如下所示说明： Stats，a56爆大奖在线娱乐ServerCnxn上的统计数据。 Watcher，a56爆大奖在线娱乐时间处理器。 ServerCnxn，a56爆大奖在线娱乐服务器连接，a56爆大奖在线娱乐一个从客户端到服阅读全文

posted @ 2017-02-28 10:47 leesf 阅读(4325) 评论(0) 推荐(4) 编辑

2017年2月27日

【Zookeeper】源码分析之请求处理链（四）之FinalRequestProcessor

摘要：一、前言前面分析了SyncReqeustProcessor，接着分析请求处理链中最后的一个处理器FinalRequestProcessor。二、FinalRequestProcessor源码分析 2.1 类的继承关系说明：FinalRequestProcessor只实现了RequestProc 阅读全文

posted @ 2017-02-27 15:18 leesf 阅读(2502) 评论(0) 推荐(5) 编辑

2017年2月24日

【Zookeeper】源码分析之请求处理链（三）之SyncRequestProcessor

摘要：一、前言在分析了PrepRequestProcessor处理器后，接着来分析SyncRequestProcessor，该处理器将请求存入磁盘，其将请求批量的存入磁盘以提高效率，请求在写入磁盘之前是不会被转发到下个处理器的。二、SyncRequestProcessor源码分析 2.1 类的继承关系阅读全文

posted @ 2017-02-24 16:53 leesf 阅读(2896) 评论(0) 推荐(4) 编辑

2017年2月22日

【Scala】Scala之Classes and Properties

摘要：一、前言前面学习了控制结构，下面学习Scala的Class和Properties。二、Class&Properties 尽管Scala和Java很类似，但是对类的定义、类构造函数、字段可见性控制等则不相同，Java更为冗长，Scala精炼。本章将通过Scala的构造函数工作原理来理解Scala的阅读全文

posted @ 2017-02-22 21:32 leesf 阅读(2674) 评论(0) 推荐(1) 编辑

2017年2月20日

【Zookeeper】源码分析之请求处理链（二）之PrepRequestProcessor

摘要：一、前言前面学习了请求处理链的RequestProcessor父类，接着学习PrepRequestProcessor，其通常是请求处理链的第一个处理器。二、PrepRequestProcessor源码分析 2.1 类的继承关系说明：可以看到PrepRequestProcessor继承了Thre 阅读全文

posted @ 2017-02-20 17:42 leesf 阅读(3591) 评论(2) 推荐(5) 编辑

2017年2月17日

【Zookeeper】源码分析之请求处理链（一）

摘要：一、前言前面已经分析了Watcher机制的主要代码，现在接着分析Zookeeper中的请求处理链，其是Zookeeper的主要特点之一。二、总体框图对于请求处理链而言，所有请求处理器的父接口为RequestProcessor，其框架图如下说明： AckRequestProcessor，将前一阅读全文

posted @ 2017-02-17 20:02 leesf 阅读(2830) 评论(1) 推荐(6) 编辑

2017年1月19日

【Scala】Scala之Control Structures

摘要：一、前言前面学习了Scala的Numbers，接着学习Scala的Control Structures(控制结构)。二、Control Structures Scala中的控制结构与Java中的颇为类似，但也有所不同，例如，if/then/else控制结构与Java的类似，但是其可以返回值，虽然阅读全文

posted @ 2017-01-19 11:42 leesf 阅读(782) 评论(0) 推荐(1) 编辑

2017年1月18日

【Zookeeper】源码分析之Watcher机制（三）之ZooKeeper

摘要：一、前言前面已经分析了Watcher机制中的大多数类，本篇对于ZKWatchManager的外部类Zookeeper进行分析。二、ZooKeeper源码分析 2.1 类的内部类 ZooKeeper的内部类框架图如下图所示说明： · ZKWatchManager，Zookeeper的Watche 阅读全文

posted @ 2017-01-18 11:25 leesf 阅读(3603) 评论(0) 推荐(4) 编辑

2017年1月17日

【Scala】Scala之Numbers

摘要：一、前言前面已经学习了Scala中的String，接着学习Scala的Numbers。二、Numbers 在Scala中，所有的数字类型，如Byte，Char，Double，Float，Int，Long，Short都是对象，这七种数字类型继承AnyVal特质，这七种数字类型与其在Java中有相同阅读全文

posted @ 2017-01-17 21:53 leesf 阅读(2049) 评论(0) 推荐(1) 编辑

2017年1月16日

【Scala】Scala之String

摘要：一、前言大数据领域的Spark、Kafka、Summingbird等都是由Scala语言编写而成，相比Java而言，Scala更精炼。由于笔者从事大数据相关的工作，a56爆大奖在线娱乐有必要好好学习Scala语言，之前也学习过，但是没有记录，a56爆大奖在线娱乐就会忘记，感觉Scala确实比Java方便精炼很多，下面以Scala 阅读全文

posted @ 2017-01-16 18:49 leesf 阅读(13912) 评论(0) 推荐(3) 编辑

【Zookeeper】源码分析之Watcher机制（二）之WatchManager

摘要：一、前言前面已经分析了Watcher机制中的第一部分，即在org.apache.zookeeper下的相关类，接着来分析org.apache.zookeeper.server下的WatchManager类。二、WatchManager源码分析 2.1 类的属性说明：WatcherManager 阅读全文

posted @ 2017-01-16 10:33 leesf 阅读(4057) 评论(2) 推荐(3) 编辑

2017年1月15日

【Zookeeper】源码分析之Watcher机制（一）

摘要：一、前言前面已经分析了Zookeeper持久话相关的类，下面接着分析Zookeeper中的Watcher机制所涉及到的类。二、总体框图对于Watcher机制而言，主要涉及的类主要如下。说明： Watcher，接口类型，其定义了process方法，需子类实现。 Event，接口类型，Watch 阅读全文

posted @ 2017-01-15 17:02 leesf 阅读(6714) 评论(0) 推荐(3) 编辑

2017年1月14日

【Zookeeper】源码分析之持久化（三）之FileTxnSnapLog

摘要：一、前言前面分析了FileSnap，接着继续分析FileTxnSnapLog源码，其封装了TxnLog和SnapShot，其在持久化过程中是一个帮助类。二、FileTxnSnapLog源码分析 2.1 类的属性说明：类的属性中包含了TxnLog和SnapShot接口，即对FileTxnSnap 阅读全文

posted @ 2017-01-14 18:31 leesf 阅读(2893) 评论(0) 推荐(1) 编辑

【Zookeeper】源码分析之持久化（二）之FileSnap

摘要：一、前言前篇博文已经分析了FileTxnLog的源码，现在接着分析持久化中的FileSnap，其主要提供了快照相应的接口。二、SnapShot源码分析 SnapShot是FileTxnLog的父类，接口类型，其方法如下说明：可以看到SnapShot只定义了四个方法，反序列化、序列化、查找最新的阅读全文

posted @ 2017-01-14 11:51 leesf 阅读(2772) 评论(0) 推荐(1) 编辑

2017年1月13日

【Zookeeper】源码分析之持久化（一）之FileTxnLog

摘要：一、前言前一篇已经分析了序列化，这篇接着分析Zookeeper的持久化过程源码，持久化对于数据的存储至关重要，下面进行详细分析。二、持久化总体框架持久化的类主要在包org.apache.zookeeper.server.persistence下，此�a56爆大奖在线娱乐仓饕嵌云湎碌睦嘟蟹治觯浒伦芴宓睦嘟� 阅读全文

posted @ 2017-01-13 16:19 leesf 阅读(5243) 评论(0) 推荐(4) 编辑

2017年1月12日

【Zookeeper】源码分析之序列化

摘要：一、前言在完成了前面的理论学习后，现在可以从源码角度来解析Zookeeper的细节，首先笔者想从序列化入手，因为在网络通信、数据存储中都用到了序列化，下面开始分析。二、序列化序列化主要在zookeeper.jute包中，其中涉及的主要接口如下 · InputArchive · OutputAr 阅读全文

posted @ 2017-01-12 16:40 leesf 阅读(8980) 评论(1) 推荐(5) 编辑

2016年12月31日

【杂文】2016年度总结

摘要：一、卷首语回想去年此时的2015年总结，岁月不饶人，一年的时间又这样溜走了。一年的时间，很长，长到可以发生很多事情；很短，短到好多事情都还没来得及发生。二、回顾 2.1 科研 2015年定的今年争取完成一篇论文，这个目标暂时还没有完成。今年之前已经写完了一篇论文，但是导师看了后觉得质量太差、立意阅读全文

posted @ 2016-12-31 17:56 leesf 阅读(2159) 评论(4) 推荐(1) 编辑

摘要： Zookeeper的目录整理如下 1. 【分布式】分布式架构 2. 【分布式】一致性协议 3. 【分布式】Chubby与Paxos 4. 【分布式】Zookeeper与Paxos 5. 【分布式】Zookeeper使用--命令行 6. 【分布式】Zookeeper使用--Java API 7. 【分阅读全文

posted @ 2016-12-31 17:07 leesf 阅读(6572) 评论(5) 推荐(5) 编辑

2016年12月17日

【分布式】Zookeeper数据与存储

摘要：一、前言前面分析了Zookeeper对请求的处理，本篇博文接着分析Zookeeper中如何对底层数据进行存储，数据存储被分为内存数据存储于磁盘数据存储。二、数据与存储 2.1 内存数据 Zookeeper的数据模型是树结构，在内存数据库中，存储了整棵树的内容，包括所有的节点路径、节点数据、ACL 阅读全文

posted @ 2016-12-17 17:52 leesf 阅读(21865) 评论(0) 推荐(6) 编辑

2016年12月13日

【分布式】Zookeeper请求处理

摘要：一、前言在前面学习了Zookeeper中服务器的三种角色及其之间的通信，接着学习对于客户端的一次请求，Zookeeper是如何进行处理的。二、请求处理 2.1 会话创建请求 Zookeeper服务端对于会话创建的处理，大体可以分为请求接收、会话创建、预处理、事务处理、事务应用和会话响应六大环节，阅读全文

posted @ 2016-12-13 21:35 leesf 阅读(6951) 评论(0) 推荐(3) 编辑

2016年12月6日

【分布式】Zookeeper的服务器角色

摘要：一、前言前一篇已经详细的讲解了Zookeeper的Leader选举过程，下面接着学习Zookeeper中服务器的各个角色及其细节。二、服务器角色 2.1 Leader Leader服务器是Zookeeper集群工作的核心，其主要工作如下 (1) 事务请求的唯一调度和处理者，保证集群事务处理的顺序阅读全文

posted @ 2016-12-06 21:53 leesf 阅读(4979) 评论(0) 推荐(4) 编辑

【分布式】Zookeeper的Leader选举

摘要：一、前言前面学习了Zookeeper服务端的相关细节，其中对于集群启动而言，很重要的一部分就是Leader选举，接着就开始深入学习Leader选举。二、Leader选举 2.1 Leader选举概述 Leader选举是保证分布式数据一致性的关键所在。当Zookeeper集群中的一台服务器出现以下阅读全文

posted @ 2016-12-06 19:45 leesf 阅读(35515) 评论(7) 推荐(43) 编辑

2016年11月27日

【分布式】Zookeeper服务端启动

摘要：一、前言前面已经了解了Zookeeper会话相关知识点，接着来学习Zookeeper服务端相关细节。二、服务端服务端整体架构如下 Zookeeper服务器的启动，大致可以分为以下五个步骤 1. 配置文件解析。 2. 初始化数据管理器。 3. 初始化网络I/O管理器。 4. 数据恢复。 5. 对阅读全文

posted @ 2016-11-27 12:22 leesf 阅读(6422) 评论(0) 推荐(2) 编辑

2016年11月26日

【分布式】Zookeeper会话

摘要：一、前言前面分析了Zookeeper客户端的细节，接着继续学习Zookeeper中的一个非常重要的概念：会话。二、会话客户端与服务端之间任何交互操作都与会话息息相关，如临时节点的生命周期、客户端请求的顺序执行、Watcher通知机制等。Zookeeper的连接与会话就是客户端通过实例化Zook 阅读全文

posted @ 2016-11-26 20:25 leesf 阅读(10492) 评论(5) 推荐(5) 编辑

掌控之中，才会成功；掌控之外，注定失败。

公告