关于HDFS笔记—hdfs java编程之创建目录

最新推荐文章于 2025-05-06 09:17:35 发布

香菜香

最新推荐文章于 2025-05-06 09:17:35 发布

阅读量2.7k

点赞数

CC 4.0 BY-SA版权

分类专栏：笔记文章标签： hadoop 大数据 java hdfs

本文链接：https://blog.csdn.net/A_Little_Fish_/article/details/117665538

本文介绍了如何使用IDEA连接HDFS集群并实现创建目录。首先确保相关依赖下载完成，然后在IDEA中创建一个名为com.zjyy.hdfs.operate的包，下面包含HDFSoperate类。通过编程操作，成功创建了目录/zhangjiayuan/dir1。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

用IDEA连接hdfs集群，并且实现创建目录

注意依赖下载：

在开始编程之前，请先确保相关依赖已经下载完成；
且maven界面不报错。（这里使用的是IDEA）

工程关联框架源码

创建文件夹
在IDEA中首先创建了一个名字为com.zjyy.hdfs.operate的一个包
在此包下面创建一个名字为HDFSoperate的类
（包名类名可以自行修改）

package com.zjyy.hdfs.operate;

import org.apache.hadoop.conf.Configuration;

最低0.47元/天解锁文章

200万优质内容无限畅学

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

香菜香

关注关注

0
点赞
踩
7

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

java hdfs 新建目录_第九讲：通过JavaAPI读写虚拟机里面的HDFS-创建文件夹

weixin_35998980的博客

02-13

1726

本讲我们来讲解如何读写另外一台计算机上面的HDFS。在实际的环境中，我们的HDFS存储和应用程序很有可能是运行在不同的计算机上的。上一讲我们实现了网络的互通，那么这一讲我们来讲解编写一个java程序来读写hdfs.。步骤：1、确保两台电脑网络互通(上一讲内容)；2、Centos里面的HDFS运行正常(上一讲内容)；3、Centos里面的防火墙开通9000端口(也就是centos里面的hdfs配置...

java hdfs 新建目录_如何用java在hdfs中创建一个新目录？

weixin_34504277的博客

02-13

1006

public static void main(String[] args) throws IOException, URISyntaxException{????????????配置config = new Configuration();config.set("fs.default.name","hdfs://127.0.0.1:50070/dfshealth.jsp");FileSystem...

参与评论您还未登录，请先登录后发表或查看评论

在HDFS上创建目录

m0_46144994的博客

01-10

1万+

一、PC环境 windows10 虚拟机环境：VMware Workstation Pro 虚拟机系统：二、目标在HDFS创建新的工作路径new，如图三、实现语句 hadoop fs -mkdir -p /new

HDFS 的常用命令

最新发布

2401_87581373的博客

05-06

278

1.操作命令操作命令是以hdfs dfs开头的命令。通过这些命令，用户可以完成 HDFS 文件的和等操作，的一般格式如下。其中，hdfs是 Hadoop 系统在 Linux 系统中的主命令；dfs是子命令，表示执行文件系统操作；通用选项由 HDFS 文件操作命令和操作参数组成。

IDEA 在hdfs中创建目录

maomao_dreamhigh的博客

01-13

1726

原文地址 https://www.cnblogs.com/nan-qiu/p/11602529.html 1.先下载maven并配置好maven环境变量。之后在idea中配置好maven和tomcat 2.创建maven项目在项目中的pom.xml中导入相应的依赖 <dependencies> <dependency> <groupId>junit</groupId> <artifactId>junit</artifactI

大数据-hdfs-使用java API在HDFS创建目录-方法步骤

橙汁糖的博客

11-09

3414

1.实例化configuration Configuration configuration = new Configuration(); 2.实例化文件系统FileSystem FileSystem fileSystem = FileSystem.get(new URI(“hdfs://主节点IP:8082”),configuration); 3.使用文件系统对象调用mkdir（相应的API操作...

关于HDFS笔记—hdfs java编程之上传下载文件

A_Little_Fish_的博客

06-09

582

用IDEA连接hdfs集群，并且实现上传下载文件注意以下代码是在上一篇创建目录文章的基础上运行 1.治理是将文件上传的hdfs的 /zhangjiayuan/dir1/ 文件目录，检查需要上传的hdfs的 /zhangjiayuan/dir1/ 文件目录下是否存在将上传的文件。 2.在Windows系统上新建一个文件夹，这里需要记住路径。 ...

Hadoop | HDFS 学习笔记（二）HDFS Java API 环境搭建 | Java操作HDFS文件系统 | 多案例

希望每天都能进步一点点

01-17

3702

文章目录参考资料运行环境一、准备 HDFS Java API 环境1.1 在windows系统中准备Hadoop环境1.2 使本机连接集群节点1.2.1 域名映射1.2.2 路由转发1.3 使用 IDEA 创建 Maven 项目二、HDFS Java API 操作案例2.1 创建文件夹2.2 上传文件2.3 下载文件2.4 删除文件2.5 文件的更名和移动2.6 获取HDFS文件信息2.7 文件与文件夹的判断2.8 HDFS - API 配置参数优先级问题2.8.1 通过配置文件2.8.2 通过Config

大数据-使用Java API操作HDFS

m0_62492032的博客

12-07

2235

创建Maven项目 - HDFSDemo在pom.xml文件里添加hadoop和junit依赖 3、创建日志属性文件在resources目录里创建log4j.properties文件 4、启动集群HDFS服务在主节点上执行命令：start-dfs.sh在Hadoop WebUI界面查看在HDFS Shell里利用hdfs dfs -touchz命令可以创建时间戳文件创建net.hf.hdfs包，在包里创建CreateFileOnHDFS类编写create1()方法运行程序，查看结果利用Hadoop

HDFS学习笔记:HDFS JavaAPI编程

lrxcmwy2的博客

07-27

2003

HDFS Java 常用的API

HDFS的基础练习--新建目录

qq_58476985的博客

09-13

8564

4.把mydata01上传到HDFS的/data01，把mydata02上传到HDFS的/data02，以此类推，把5份文件都上传到大数据平台的HDFS上。3.在/home/hadoop/software/自己名字命名目录下创建5分有数据的文件(mydata01-mydata05）文件内容自定义。hdfs dfs -get /dt01/data /root/zhang/ （注意中间有空格）如：hdfs dfs -mkdir -p /dt03/date05/date06/date07。

java操作Hadoop源码之HDFS Java API操作-创建目录

01-17

java操作Hadoop源码之HDFS Java API操作-创建目录，附带所需全部jar包，欢迎下载学习。

HDFS的基本操作（创建目录或文件、查看目录或文件、上传和拷贝文件到HDFS上、追加数据到HDFS上、从HDFS上下载文件到Linux本地、合并HDFS文件）

热门推荐

weixin_61472217的博客

09-13

4万+

主要涉及HDFS shell操作命令，包括创建目录或文件、查看目录或文件、上传和拷贝文件到HDFS上、追加数据到HDFS上、从HDFS上下载文件到Linux本地、合并HDFS上多个文件并下载、删除HDFS上的文件、查看各种命令的用法等。

使用HDFS JAVA API创建文件夹

weixin_44943389的博客

04-08

190

【代码】使用HDFS JAVA API创建文件夹。

java hdfs 指定用户目录_HDFS（三）——用 Java 创建一个 HDFS 目录，HDFS 的权限的问题...

weixin_31851979的博客

03-06

803

一、导入 HDFS 所需 jar 包把解压后的 hadoop 文件夹下的 common 目录中的 jar，和里面的 lib 包中所有的 jar，以及 hdfs 目录下的 jar，和里面的 lib 包中所有的 jar 都添加到项目的环境变量中。二、编写测试代码import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs...

大数据hadoop学习【6】-----通过JAVA编程实现对HDFS文件操作的JAVA整体项目

qq_42451251的博客

04-03

7890

通过JAVA实现对HDFS文件个各种操作，一直是hadoop基础学习的重要步骤，也是基础知识，所以，这对JAVA编程的能力有一定的要求，在JAVA的基础上，学习好hadoop！本次博客，我们利用JAVA做一个对HDFS文件操作的整体项目，内容如下：向HDFS上传任意文本文件，如果指定的文件在HDFS中已经存在，由用户指定是追加到原有文件末尾还是覆盖原有的文件从HDFS中下载指定文件，如果本地...

利用Java api实现hdfs的上传、下载、创建目录

small_xiaoxi的博客

01-13

1110

利用Java api实现hdfs的上传、下载、创建目录下载：download.java package com.company; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; import org....

Java操作HDFS示例

致虚极，守静笃，万物并作，吾以观其复

05-08

188

1. 环境准备 大数据集群一套，没有的可以自己本地搭建一套（参考地址：https://www.jianshu.com/p/2c2ae6490fa0）本地安装JDK 本地安装IDEA或者Eclipse 2. 创建Maven项目在IDEA工具中创建一个maven项目，并在pom.xml中添加以下依赖： <dependencies> <dependency> <groupId>junit</groupId> <artifactId&gt

HDFS Java客户端操作（创建文件夹，上传、下载，删除文件，块详情查看，I/O流操作，是否是文件或者文件夹）（三）

May_J_Oldhu的博客

09-09

1216

一.Windows安装hadoop 1.解压hadoop-2.6.0-cdh5.14.2到D盘 2.把hadoop-bin.rar文件解压后所有文件拷到hadoop的bin文件夹下 3.把bin文件下的hadoop.dll文件拷贝到C:\windows\System32目录下二.Java API完成移动通信数据的管理 1.一般在idea中新建一个maven工程，并在pom.xml文件中添加maven依赖包注：如何建maven工程见博客：Maven安装 <dependency>

Hadoop学习笔记：掌握Java实现Hadoop编程

由于学习Hadoop通常涉及到编写和理解大量的Java代码，因此掌握Java编程语言是学习Hadoop的基础。通过实践编写Hadoop作业，可以加深对分布式存储和计算原理的理解，并能够将理论知识应用到解决实际大数据问题中去。