当前在Hadoop技术的发展中，如何把 Docker技术应用于Hadoop平台的建立，尤其是对于Hadoop on Docker规模部署问题的解决，直是个备受关注的技术难点。因此，本次的中国Hadoop技术峰会中，实现键规模部署的Hadoop on Docker及其DEMO演示，也成为了大会中的大热点话题。

百度：云计算(cloud computing)
　　是基于互联网的相关服务的增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。云是网络、互联网的种比喻说法。过去在图中往往用云来表示电信网，后来也用来表示互联网和底层基础设施的抽象。因此，云计算甚至可以让你体验每秒10万亿次的运算能力，拥有这么强大的计算能力可以模拟核爆炸、预测气...

从本篇博客开始咱们起来详细了解Hadoop的每个部分，我们在上篇博客中介绍了 HDFS，MapReduce，MapReduce为了更有效率其实是建立在HDFS之上的，有了分布式的文件系统，我们就能在这个系统之上更有效率地进行分布式的计算，我们看看它是咱么实现更优秀的分布式计算。

半导体制程迈入20奈米以下技术节点后，良率、生产周期及成本管控的挑战更加艰钜;新式Hadoop资料储存架构可让半导体厂以更低成本达成巨量资料储存，进而利用深入的统计分析实现更精准有效的设备管理，提高产线运作效率。

TDW（Tencent distributed Data Warehouse，腾讯分布式数据仓库）基于开源软件Hadoop和Hive进行构建，打破了传统数据仓库不能线性扩展、可控性差的局限，并且根据腾讯数据量大、计算复杂等特定情况进行了大量优化和改造。

、来源
Streaming Hadoop Performance Optimization at Scale, Lessons Learned at Twitter
(Data platform @Twitter)
二、观后感
2.1 概要
此稿介绍了Twitter的核心数据类库团队，在使用Hadoop处理离线任务时，使用的性能分析方法，及由此发现的问题和优化手段，对如何使用JVM/HotSpot profile（-Xprof）分析Hadoop Job的方法调用开销、Had...

问题引入
使用storm可以方便的构建种集群式的数据框架，并通过定义topo来实现业务逻辑。
但使用topo存在个缺点， topo的处理能力来自于其启动时设置的worker数目，在很多情况下，我们需要能够根据业务压力来调整集群的处理能力，这时候单的topo就无法解决这个问题了。
为了能够更加灵活的定义处理能力，可以考虑将原有的topo根据业务域进行拆分，做到...

早期的篇文章，针对Hadoop 2.6.0. 、Listener
Listener线程，当Server处于运行状态时，其负责监听来自客户端的连接，并使用Select模式处理Accept事件。
同时，它开启了个空闲连接（Idle Connection）处理例程，如果有过期的空闲连接，就关闭。这个例程通过个计时器来实现。
当select操作调用时，它可能会阻塞，这给了其它线程执行的机会。当有accep...