flink遇到NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException错误

最新推荐文章于 2023-04-23 20:56:24 发布
最新推荐文章于 2023-04-23 20:56:24 发布
阅读量5.1k 收藏 6
点赞数 4
分类专栏： Flink 文章标签： flink hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Accelerating/article/details/118084934
版权

EMR flink1.12.1升级到flink1.13.1，启动yarn-session时，遇到Exception in thread “main” java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException
在这里插入图片描述
需要在yarn-session.sh 文件中添加 或者在环境变量中添加

export HADOOP_CLASSPATH=`hadoop classpath`

这里选择在环境变量中设置,再启动，异常得到解决。

参考
https://www.cnblogs.com/infoo/p/13385069.html

以Yarn模式启动Flink报错Exception in thread “main“ java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/ex
QYHuiiQ
04-06 1283
下载对应的jar，按照Hadoop的版本（我的是2.7.5）下载。然后放到Flink的lib目录下。
【Flink】Flink yarn 下报错ClassNotFoundException: org.apache.hadoop.yarn.api.ApplicationConstants$Environ
九师兄
08-29 1648
flink启动日志报错如下 flink 在yarn上的日志报错如下 最后结局原因如下参考建议确保 Flink 版本与 YARN 版本兼容。不同的 Flink 版本可能需要不同版本的 YARN。请确保你使用的 Flink 版本与你的 YARN 版本兼容。检查环境和类路径设置。确保在运行 Flink 任务之前，所有必需的依赖项包括 YARN 和 Hadoop 相关的类库都正确地配置在类路径中。检查 Flink 的 flink-yarn_*.jar 文件是否正确下载并部署。这个文件包含了 Flink 与 YARN
org.apache.hadoop.yarn.exceptions.YarnException: Failed to initialize queues
ycfn97的博客
08-16 3735
在配置yarn-HA高可用集群后，执行yarn-start.sh，发现nodemanager启动成功，而resourcemanager却没有启动，于是： 检查logs： tail -n 100 hadoop-root-resourcemanager-hadoop01.log 发现resourcemanager启动过程中出现这样的报错： org.apache.hadoop.service.ServiceStateException: org.apache.hadoop.yarn.exceptions.Yar
flinkOnYarn 启动报错NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException
Alex_Sheng_Sea的博客
10-17 6132
[root@hadoop-01 flink-1.9.0]# bin/yarn-session.sh Error: A JNI error has occurred, please check your installation and try again Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/...
java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException
感谢你的关注~~~~ღ( ´･ᴗ･` )
11-13 4036
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException 当执行./bin/yarn-session.sh时报如下错误： 解决办法： 将cp /data/hadoop-3.1.4/share/hadoop/yarn/hadoop-yarn-api-3.1.4.jar /data/flink-1.10.2/lib/中，然后重新启动就OK了 ...
NoClassDefFoundError:org/apache/hadoop/yarn/exceptions/YarnException
huaweitman的专栏
06-08 1750
https://www.cnblogs.com/infoo/p/13385069.html
Exception in thread “main” java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnExc
likemiaomiao的博客
08-04 3602
Exception in thread “main” java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException 执行flink on yarn_session时候，报错如下 因为版本问题，flink没有提供flink-shaded-hadoop-*的jar包，需要自己手动添加。 在flink lib中加入flink-shaded-hadoop-2-uber-2.8.3-10.0 jar包。 有需要jar包可
Exception in thread “main“ java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnExc
ztx22555的博客
08-23 2237
Error: A JNI error has occurred, please check your installation and try again Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException
Linux环境下安装FLink1.10.0并启动SQL-client读取Hive1.2.1的数据
wangyu_qiuxue的博客
04-06 3000
Linux环境下安装FLink1.10.0并启动SQL-client读取Hive数据 首先去官网下载Flink1.10.0的tgz的包，教程如上篇文章上半部分流程一样，然后配置一下FLINK_HOME/conf/sql-client-defaults.yaml： catalogs: - name: myhive #自己定个名字就行 type: hive hive-co...
Flink采坑记录
muyingmiao的专栏
02-02 3308
1.运行./yarn-session.sh命令报错 [hadoop@hadoop002 bin]$ ./yarn-session.sh --help Error: A JNI error has occurred, please check your installation and try again Exception in thread "main" java.lang.NoClassD...
迁移映射-java.lang.NoclassDefFoundError:org/apache/hadoop/yarn/exceptions/YarnException
X_yufei的博客
04-23 264
通过jar包查找脚本，查询提示报错类是否存在，一般情况下数据治理dp的lib下的jar是最全的，如果dp找不到的话尝试去其它项目找找看，最终发现缺少hadoop-yarn-api.数据治理平台 hive迁移提示yarn错误，具体报错截图如下(org/apache/hadoop/yarn/exceptions/YarnException)按照hadoop其它jar版本替换对应缺少jar版本即可。
hadoop报错：org.apache.hadoop.yarn.exceptions.YarnException: Unauthorized request to start container.
dingyiye2649的博客
07-23 2709
当我在hadoop2.6.4上运行MR程序时，发生了如下错误： org.apache.hadoop.yarn.exceptions.YarnException: Unauthorized request to start container. 内容： 18/07/23 10:49:30 INFO mapreduce.Job: Task Id : attempt_1532301779475_...
Hadoop运行错误：org.apache.hadoop.yarn.exceptions.YarnException
热门推荐
小萌猿的博客
03-03 2万+
打包MapReduce程序为jar包后在Hadoop集群执行时出错： 原因：集群时间不一致造成的 解决：同步集群时间即可 同步步骤： 思路：比如集群有三台机器：node1,node2,node3,将node1作为时间服务器，其它两台与node1同步即可。 一、设置时间服务器：（node1中执行） 1、vi /etc/ntp.conf 注释掉restrict default kod...
flink 在本地启动 报错ClassNotFoundException: org.apache.hadoop.yarn.exceptions.YarnException解决方法
09-08 2088
ClassNotFoundException: org.apache.hadoop.yarn.exceptions.YarnException 解决方法，用meven将flink的项目打成运行的包用依赖的包就解决
hadoop错误org.apache.hadoop.yarn.exceptions.YarnException Unauthorized request to start container
lirika_777的博客
11-22 3685
错误： 17/11/22 15:17:15 INFO client.RMProxy: Connecting to ResourceManager at Master/192.168.136.100:8032 17/11/22 15:17:16 INFO input.FileInputFormat: Total input paths to process : 1 17/11/22 15:17
【解决】org.apache.hadoop.yarn.exceptions.YarnRuntimeException：创建完成目录时出错
Jecky的博客
10-30 5666
场景还原： HDFS目录出现错误，导致yarn无法启动，报错如下： `org.apache.hadoop.yarn.exceptions.YarnRuntimeException：创建完成目录时出错：[hdfs：//hadoop102.domain：8020 / user / >history / done] 在org.apache.hadoop.mapreduce.v2.hs.HistoryFileManager.tryCreatingHistoryDirs（HistoryFileManager..
java.lang.NoClassDefFoundError: org/apache/flink/api/common/serialization/DeserializationSchema
最新发布
08-30
java.lang.NoClassDefFoundError: org/apache/flink/api/common/serialization/DeserializationSchema 是一个错误信息，表示在运行时找不到对应的类定义。 这个错误常常是由于缺少相关的依赖包或者版本不匹配导致的...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值