换下风格^_^

 分类:Hadoop源码

Hadoop源码分析-压缩(三)

Hadoop源码分析-压缩(三)
Hadoop压缩框架 1、编码/解码器 CompressionCodec及其相关类 createOutputStream(OutputStream out)用于通过底层输出类创建相应的压缩算法的压缩流 createOutputStream(OutputStream out,Co...

4年前 (2013-08-07) 0评论 0喜欢

Hadoop源码分析-序列化(二)

Hadoop源码分析-序列化(二)
序列化 (一)   用途: 持久化格式 通讯数据格式 拷贝克隆机制 (二)   Java内建序列化机制(继承Serializable接口) 问题:Java内建序列化机制序列化输出保存了大梁的附加信息,导致序列化结果膨胀,对需要保存和处理大规模数据的hadoop来说,需要一...

4年前 (2013-08-07) 0评论 0喜欢

Hadoop源码分析-准备部分(一)

Hadoop源码分析-准备部分(一)
这里分两部分介绍: 源码包介绍 源码阅读环境搭建 1、源码包介绍 下载地址:http://www.apache.org 我选用的Hadoop版本是1.1.2.  解压缩出来包结构如下: bin: 此目录下为进行hadoop配置、运行以及管理的shell命令集合 c++:此目录...

4年前 (2013-08-07) 0评论 0喜欢

Hadoop源码分析-开篇

Hadoop源码分析-开篇
已经在公司里独立搭建起来Hadoop平台和基于Hadoop的数据平台。现在平台和公司统计业务基本已经稳定下来了,空了,就来写写总结,看看源码,希望对Hadoop相关技术有更大更深的了解! 先说说平台吧: 项目是从2012年10启动的,由于这一个东西我们部门和人员都是一穷二白,之后...

4年前 (2013-08-07) 0评论 0喜欢