1.简介
Docker是一个开源的应用容器引擎；是一个轻量级容器技术；
Docker支持将软件编译成一个镜像；然后在镜像中各种软件做好配置，将镜像发布出去，其他使用者可以直接使用这个镜像；
运行中的这个镜像称为容器，容器启动是非常快速的。
捷报:连续2周若泽数据第7-12名学员喜捷offer(含蚂蚁金服)
我们不做过多宣传，因为我们是若泽数据，企业在职。
（现在其他机构也效仿我们说，企业在职，哎，很无语了，擦亮眼睛很重要！）
生产常用Spark累加器剖析之二
Driver端
- Driver端初始化构建Accumulator并初始化，同时完成了Accumulator注册，Accumulators.register(this)时Accumulator会在序列化后发送到Executor端
- Driver接收到ResultTask完成的状态更新后，会去更新Value的值 然后在Action操作执行后就可以获取到Accumulator的值了
- Executor端接收到Task之后会进行反序列化操作，反序列化得到RDD和function。同时在反序列化的同时也去反序列化Accumulator(在readObject方法中完成)，同时也会向TaskContext完成注册
- 完成任务计算之后，随着Task结果一起返回给Driver
捷报:上周若泽数据6名学员喜捷offer(含腾讯)
我们不做过多宣传，因为我们是若泽数据，企业在职。
（现在其他机构也效仿我们说，企业在职，哎，很无语了，擦亮眼睛很重要！）
生产常用Spark累加器剖析之一
由于最近在项目中需要用到Spark的累加器，同时需要自己去自定义实现Spark的累加器，从而满足生产上的需求。对此，对Spark的累加器实现机制进行了追踪学习。
本系列文章，将从以下几个方面入手，对Spark累加器进行剖析：
- Spark累加器的基本概念
- 累加器的重点类构成
- 累加器的源码解析
- 累加器的执行过程
- 累加器使用中的坑
- 自定义累加器的实现
