从零开始学hadoop教学ppt4 hdfs2

1、主讲：温 HDFS开发基本步骤 HDFS Java API详解 Configuration Path FileSystem Stream、IOUtils HDFS Java API使用场景示例 实例化 Configuration 实例化 FileSystem 根据配置文件选择使用本地或分布式文件系统 文件或者目录操作 Stream 包org.apache.hadoop.conf 构造方法 PublicConfiguration() 调用构造方法Configuration(true) void set(String name, String value) 包 org.apache.hadoop.

2、fs 构造方法 public Path (String pathString) public Path (URI aUri) String getName() 返回路径上的最后的资源名称 Path getParent() 返回父目录，如果已是根目录则返回null getFileSystem（Conguration conf） 返回该path所属的文件系统实例 包 org.apache.hadoop.fs 构造方法 Protected FileSystem() FileSystem是一个抽象类，不能通过new来创建 通过静态get(Configuration conf) 方法获得FileSyst

3、em 子类的实例 主要子类 LocalFileSystem DistributedFileSystem boolean createNewFile(Path f) 不会覆盖已有文件 FSDataOutputStream create(Path f) 覆盖已有文件 创建文件并返回输出流 FSDataOutputStream create(Path f bool, an overwrite) 创建文件并返回输出流 FSDataOutputStream create(Path f boolean overwrite,int buffer) FSDataOutputStream create(Path

4、 f boolean overwrite,int buffer,short replication,long blockSize) FSDataInputStream open(Path f) FSDataInputStream open(Path f,int bufferSize) 返回输入流 如果文件不存在则会抛出异常 FSDataOutputStream append(Path f) FSDataOutputStream append(Path f, int bufferSize) Boolean mkdirs（path f） Boolean mkdirs (Path f, FsPerm

5、ission permission) static boolean mkdirs (FileSystem fs, Path dir, FsPermission permission) boolean delete (Path f, boolean recursive) 删除文件或目录 如果f是目录，则参数recursive指定是否要递归删除 FileStatus listStatus(Path f) FileStatus信息包括 绝对路径 文件大小 文件访问时间 块大小、复制份数 文件所属用户、组、访问权限 Path path = new Path(/gzu/zs); FileStatusfss = fs.listStatus(path); for(int i = 0;i 0) System.out.println(line); inputStream.close(); listStatus Configuration config = new Configuration(); FileSystem hdfs = FileSystem.get(config); Path dir