HDFS常用命令以及简单API

• 1) kill -9 xxxx 杀掉进程
• 2)hdfs的客户端
  1.网页形式->测试用 ip:50070
  2.命令行形式->测试用
  3.企业级API
  查看帮助 hdfs dfs -help 查看hdfs命令参数

1)查看目录文件
hdfs dfs -ls /
2)上传文件
hdfs dfs -put /本地路径 /hdfs路径
3)下载文件
hdfs dfs -get /hdfs路径 /本地路径
4)把文件合并下载
hdfs dfs -getmerge /hdfs路径 /本地路径
5)删除文件
hdfs dfs -rm /hdfs路径
6)删除文件夹
hdfs dfs -rm -r /hdfs路径
7)修改文件名
hdfs dfs -mv /文件名
hdfs dfs -mv /hdfs路径 /hdfs路径
这个命令不仅可以修改文件名
还可以将文件修改名字后改变路径存储
8)查看文件
hdfs dfs -cat /文件
hdfs dfs -tail -f /文件
9)把本地文件剪切上传到hdfs
hdfs dfs -moveFromLocal /本地路径 /hdfs路径
10)创建文件夹
hdfs dfs -mkdir /文件夹名
11)创建多级文件夹
hdfs dfs -mkdir -p /文件夹名/文件夹名
12)查看hdfs文件夹中有多少文件
hdfs dfs -count /文件夹
13)查看hdfs空间
hdfs dfs -df /
hdfs dfs -df -h /
14)复制文件
hdfs dfs -cp /hdfs路径 /hdfs路径
15)修改文件的副本数
hdfs dfs -setrep 副本数 /文件

package com.ycf.text;

import java.io.IOException;
import java.net.URI;
import java.net.URISyntaxException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;


public class HadoopDemo1 {

	public static void main(String[] args) throws IOException, InterruptedException, URISyntaxException {
		// TODO Auto-generated method stub
		//1.加载客户端配置信息
		Configuration conf = new Configuration();
		//2.指定块大小
		conf.set("dfs.blocksize", "6m");
		//3.指定副本个数
		conf.set("dfs.replication", "2");
		//构造客户端
		FileSystem fs =FileSystem.get(new URI("hdfs://192.168.232.132:9000"), conf, "root");
		//上传文件到hdfs
		fs.copyFromLocalFile(new Path("B:/JAVA测试目录1级/哈哈ha.txt"),new Path("/work"));
		//关闭资源
		fs.close();
	}

}