选择分类:

如何配置Hadoop守护进程的运行环境和运行参数?

本章我们主要学习如何配置Hadoop守护进程的运行环境和运行参数?下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

Hadoop的几个主要子项目有哪些?

本章我们主要学习Hadoop的几个主要子项目有哪些?下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

与MapReduce有关的地址及端口属性详解

本章我们主要学习与MapReduce有关的地址及端口属性,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

与HDFS有关的地址及端口属性讲解

本章我们主要学习与HDFS有关的地址及端口属性,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

如何在一个hadoop集群新增或删除一些机器而不重启

本章我们主要学习如何在一个hadoop集群新增或删除一些机器而不重启 ?下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

Hadoop中NameNode与JobTracker单点故障说明及Master和Slave总结

NameNode与JobTracker在Hadoop集群中都是唯一的。一旦NameNode与JobTracker有一个瘫痪或者说主master瘫痪,整个Hadoop也就瘫痪了。对于主master的维护工作(如备份、重启等)应该说十分重要。这属于单点故障,我们这在这里主要要解决两个问题:一是数据的备份,二是故障时节点的切换。

Hadoop中namenode、secondarynamenode和tasktracker命令详解

本章我们主要学习Hadoop中namenode、secondarynamenode和tasktracker命令,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

Hadoop中balancer、datanode、dfsadmin和jobtracker命令详解

本章我们主要学习Hadoop中balancer、datanode、dfsadmin和jobtracker命令,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

Hadoop中fsck、jar和job命令详解

本章我们主要学习Hadoop中的fsck命令、jar命令和job命令,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

fs(FSShell命令)讲解及FSShell命令指南

本章我们主要学习FSShell命令的使用及常用的FSShell命令有哪些?下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

了解并掌握Hadoop下的archive和distcp用户命令

所有的hadoop命令均由bin/hadoop脚本引发。不指定参数运行hadoop脚本会打印所有命令的描述。 Hadoop有一个选项解析框架用于解析一般的选项和运行类。 本章我们主要学习archive和distcp用户命令,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

综合MapReduce和HDFS来深入了解Hadoop的结构

在Hadoop的系统中会有一台Master,主要负责NameNode的工作以及JobTracker的工作。JobTracker的主要职责就是启动、跟踪和调度各个Slave的任务执行。还会有多台Slave,每一台Slave通常具有DataNode的功能并负责TaskTracker的工作。TaskTracker根据应用要求来结合本地数据执行Map任务以及Reduce任务。

Hadoop框架下的mapreduce示例讲解教程

最简单的MapReduce应用程序至少包含3个部分:一个Map函数、一个Reduce函数和一个main函数。main 函数将作业控制和文件输入/输出结合起来。在这点上,Hadoop提供了大量的接口和抽象类,从而为Hadoop应用程序开发人员提供许多工具,可用于调试和性能度量等。

MapReduce算法介绍小记

本章我们主要学习MapReduce算法,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

HDFS对于框架值得借鉴的设计特点有哪些?

本章我们主要学习HDFS对于框架值得借鉴的设计特点有哪些?下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

什么是HDFS?HDFS的三个重要角色有哪些?

对外部客户机而言,HDFS 就像一个传统的分级文件系统。可以创建、删除、移动或重命名文件,等等。但是 HDFS 的架构是基于一组特定的节点构建的,这是由它自身的特点决定的。这些节点包括 NameNode(仅一个),它在 HDFS 内部提供元数据服务;DataNode,它为 HDFS 提供存储块。

Map-reduce运行状态界面及直接命令行和运行进程查看详解

本章我们主要学习Map-reduce运行状态界面及直接命令行和运行进程查看,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

hdfs运行状态界面详解

本章我们主要学习hdfs运行状态界面,下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

如何测试Hadoop集群?

本章我们主要学习如何测试Hadoop集群?下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。

如何初始化、启动及停止Hadoop集群?

本章我们主要学习如何初始化、启动及停止Hadoop集群?下面我们就做一下具体讲解,希望大家多多支持中国站长网络学院。