RETHINK HADOOP3.0 之九：Yarn里的Fair scheduler
在Yarn里另一种资源调度器是Fair Scheduler公平调度器。它的基本思想是每个任务都是公平… 继续阅读 RETHINK HADOOP3.0 之九：Yarn里的Fair scheduler
- 发表于：
-
作者：
Mark
- 分类： Hadoop
- 发表评论: RETHINK HADOOP3.0 之九：Yarn里的Fair scheduler
Hadoop类别订阅
RETHINK HADOOP3.0 之八：Yarn里的Capacity scheduler
你肯定去餐厅点过菜，假如当时有很多顾客都在点菜，你会发现饭店有自己的策略来安排有限的厨师来为大家服务… 继续阅读 RETHINK HADOOP3.0 之八：Yarn里的Capacity scheduler
RETHINK HADOOP3.0 之七：一个Applicaiton是如何在YARN里运行的
大多数时候我们使用的应用比如MapReduce，Spark都是构建在Yarn之上的。我们并不需要自己… 继续阅读 RETHINK HADOOP3.0 之七：一个Applicaiton是如何在YARN里运行的
RETHINK HADOOP3.0 之六：YARN 是什么
YARN (Yet Another Resource Negotiator)字面翻译是“一个资源调度… 继续阅读 RETHINK HADOOP3.0 之六：YARN 是什么
- 发表于：
-
作者：
- 分类： Hadoop
- 发表评论: RETHINK HADOOP3.0 之六：YARN 是什么
RETHINK HADOOP3.0 之五：MAPREDUCE 下
书接上回，还是我们数豆子的程序，这次我们做一些改进。 combiner 我们之前的例子里每个mapp… 继续阅读 RETHINK HADOOP3.0 之五：MAPREDUCE 下
- 发表于：
-
作者：
- 分类： Hadoop
- 发表评论: RETHINK HADOOP3.0 之五：MAPREDUCE 下
Rethink Hadoop3.0 之四：MapReduce 上
对于Hadoop集群来说，如果我们只用它的HDFS来存放数据那就大材小用了。Hadoop另个一更重要… 继续阅读 Rethink Hadoop3.0 之四：MapReduce 上
- 发表于：
-
作者：
- 分类： Hadoop
- 发表评论: Rethink Hadoop3.0 之四：MapReduce 上
Rethink Hadoop 3.0 之三：对HDFS的操作
HDFS里文件操作的命令都是通过 hdfs dfs 和对文件操作的命令以及参数构成的。比如我们在Li… 继续阅读 Rethink Hadoop 3.0 之三：对HDFS的操作
- 格式： 日志
- 发表于：
-
作者：
- 分类： Hadoop
- 发表评论: Rethink Hadoop 3.0 之三：对HDFS的操作
Rethink Hadoop 3.0 之二：HDFS里的一些基本概念
HDFS作为一个分布式文件系统，和传统文件系统相比它面临着以下几个新的挑战： 1. 它需要能够存取大… 继续阅读 Rethink Hadoop 3.0 之二：HDFS里的一些基本概念
- 发表于：
-
作者：
- 分类： Hadoop
- 发表评论: Rethink Hadoop 3.0 之二：HDFS里的一些基本概念
Rethink Hadoop 3.0 之一：Ubuntu 16.04.1下的安装Hadoop3.0
Hadoop的安装不是很容易，以至于Apache还有另外一个开源的项目Ambari来做Hadoop集… 继续阅读 Rethink Hadoop 3.0 之一：Ubuntu 16.04.1下的安装Hadoop3.0
Rethink Hadoop 3.0 之零：Hadoop 介绍
Hadoop作为在大数据应用里的基础平台，2017年12月13日迎来了它的3.0 GA版本的发布。 … 继续阅读 Rethink Hadoop 3.0 之零：Hadoop 介绍
- 发表于：
-
作者：
- 分类： Hadoop
- 发表评论: Rethink Hadoop 3.0 之零：Hadoop 介绍