查看Java帮助手册或其它资料，用“java.net.URL”和“org.apache.hadoop.fs.FsURLStreamHandlerFactory”编程完成输出HDFS中指定文件的文本

最新推荐文章于 2023-05-12 00:18:00 发布

倚楼听南风

最新推荐文章于 2023-05-12 00:18:00 发布

阅读量2.7k

点赞数 2

CC 4.0 BY-SA版权

分类专栏：大数据文章标签：大数据 hadoop hdfs

本文链接：https://blog.csdn.net/qq_48198925/article/details/115299699

大数据专栏收录该内容

12 篇文章

订阅专栏

本文介绍如何使用Apache Hadoop的FileSystem API从HDFS读取文件内容，通过示例展示了如何创建ShowTheContent类，连接到localhost的9000端口，并逐行输出远程路径的文件内容。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.FsUrlStreamHandlerFactory;
import org.apache.hadoop.fs.Path;

import java.io.BufferedReader;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.net.URL;

public class ShowTheContent {

private Path remotePath;
private FileSystem fileSystem;

public ShowTheContent(FileSystem fileSystem, Path remotePath){
    this.fileSystem = fileSystem;
    this.remotePath = remotePath;
}

public void show(){
    try {
        URL.setURLStreamHandlerFactory(new FsUrlStreamHandlerFactory());
        InputStream inputStream = new URL("hdfs","localhost",9000,remotePath.toString()).openStream();
        BufferedReader bufferedReader = new BufferedReader(new InputStreamReader(inputStream));
        String line = null;
        while ((line = bufferedReader.readLine()) != null){
            System.out.println(line);
        }
    } catch (IOException e) {
        e.printStackTrace();
    }
}

}