回收站的使用
2.x 用 HA 实现 NameNode 高可靠 及 Federation (联盟)
小文件解决方案
云计算
zookeeper 简介
今天因测试需要, 需要第二台 hadoop 虚拟机, 于是就从 smallcpp01 克隆了一份, 命名为 smallcpp02. 对第二台主机设置了 主机名、静态IP、 HOSTS、hadoop...
使用 rest 操作 HDFS
如何使用 Shell 操作 HDFS 参考 Blog: 使用 Shell 操作 HDFS 常用命令 get == copyToLocal put == copyFromHdfs cp 源和目标都是 hdfs -f 覆盖...
使用 Java Api 操作 HDFS
使用 Shell 操作 HDFS
Hadoop 2.x 新特性
先在 windows 7 下搭建好 eclipse 项目环境, 参考 Eclipse 配置 Java 开发环境 导入依赖包 创建一个 Java 工程后, 在工程下新建个 lib 文件夹, 导入 hdfs 的相关 jar...
近些年, 微软对其分布式文件系统 (Distributed File System, DFS) 做了很多改良, 其中的一项技术对文件系统资源提供了统一视图. DFS 重新定向了来自 UNC 途径的请求,...
仅为实验集群或者小型集群的添加节点方法, 一般大型的集群都有专门的运维. 安装系统 首先安装好系统, 配置好 IP、JDK 及 Hadoop, 参考 搭建 Hadoop 分布式实验环境 前三步. 设置域名解析 到...
Hadoop 存在多种日志文件, 其中 Master 上的日志文件记录全面信息, 包括 Slave 上的 JobTracker 与 DataNode 也会将错误信息写到 Master 中, 而 Slave...
HDFS 简介
Hadoop 初识
实验最终成品: 宿主机: win7 64位, 16G 虚拟化工具: VMware Workstation 虚拟机系统: Ubuntu 32位, 1.5G, 20G, NAT 主机名: smallcpp01...