#
1.在home目录中创建文件夹MyApps2.将压缩文件解压到该目录下命令格式为：tar -zxvf 压缩文件 -C 解压路径3.配置网络环境4.1临时修改主机名临时设置的主机名，系统重启之后，会失效
NameNode在启动的时候，需要将Mettadata加载到内存中去，随着集群扩大，元数据的量也随之增加，内存压力过大。Hadoop1.x的缺点和解决办法：单点故障------à HA 一
Slots是Hadoop的一个重要概念。然而在Hadoop相关论文，slots的阐述难以理解。网上关于slots的概念介绍也很少，而对于一个有经验的Hadoop开发者来说，他们可能脑子里已经理解了sl
vmware虚拟机环境： &nbs
1 HDFS 概述 1.1 HDFS 产出背景及定义 随着数据量越来越大，在一个操作系统存不下所有的数据，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，迫切需要一种系统来管理多台机器上
启动脚本概览：1、{sbin}start-dfs.sh①hdfs-config.sh ---> {libexec}hadoop-dfs.sh②hadoop-daemons.sh --hostna
重点组件：HDFS：分布式文件系统MAPREDUCE：分布式运算程序开发框架Hive：基于大数据技术（文件系统+运算框架）的SQL数据仓库工具Hbase：基于Hadoop的分布式海量数据库
最近发现我们的hadoop集群的客户端机器负载经常飙到几百，导致机器反应很慢， 客户反应无法提交job，或者job跑的很慢。针对这种情况通常有几个解决方案，一个是增加客户端机器数量，把他们做到一个po
【io.file.buffer.size】(core-site.xml)用来设置缓存的大小，较大的缓存提供更高效的数据传输，但也意味着更大的内存消耗和延迟默认值为4KB，一般情况下设置为64KB(65
今天小编就为大家带来一篇有关hadoop namenod的管理机制和存储细节的文章。小编觉得挺实用的，为此分享给大家做个参考。一起跟随小编过来看看吧。一、简要namenode管理元数据机制：二、详细n
