- 博客(7)
- 收藏
- 关注
RSS订阅原创 Apache Flink集成HDFS报错Failed to create checkpoint storage at checkpoint coordinator side.
在网上查询相关资料后，在flink的lib目录添加flink-shaded-hadoop-3-3.1.1.7.0.3.0-79-7.0.jar、commons-cli-1.5.0.jar两个包，但报错依旧存在，添加了export HADOOP_CLASSPATH=后面发现是hadoop与flink的兼容性问题，hadoop原先使用的是3.3.4，与多个版本的flink集成都会出现报错，最后将Hadoop的版本改成3.1.3,使用flink run运行jar包就没有这个错误了，在hdfs上成功保存了检查点。
2024-11-28 22:56:20
432
原创 dolphinscheduler安装失败，部分目录被删除
将scrip目录的scp-hosts.sh文件的ssh -p $sshPort $host "cd $installPath/;rm -rf bin/ conf/ lib/ script/ sql/ ui/"这段代码注释掉，加上#使用dolphinscheduler安装过程中执行install.sh后，dolphinscheduler目录的部分文件夹被删除，并出现。sed：无法读取 conf/worker.properties：没有那个文件或目录。重新解压执行install.sh便能成功安装成功。
2024-11-05 11:31:06
374
原创 spark将程序提交到yarn集群报错datasources.jdbc.DriverWrapper.＜init＞()的解决方法
问题：我在虚拟机使用spark-submit将程序部署到yarn集群时，每次使用数据输出rdd时出现了以下错误：java.lang.NoSuchMethodException: org.apache.spark.sql.execution.datasources.jdbc.DriverWrapper.()2.如果问题还是存在，请检查自己数据输出代码，在write后面添加option(“driver”, “com.mysql.jdbc.Driver”)，添加配置mysql驱动。
2023-07-16 16:42:16
323
1
原创 pycharm连接MySQL数据源时导入驱动无法识别（No driver files provided）
问题：如下所示，pycharm导入MySQL驱动时无法识别成功，呈现红色的字体。
2022-12-10 00:13:26
1735
原创 pychram连接MySQL数据源时无法展示Host的解决方案
问题：pychram连接MySQL数据源时没有Host输入栏，无法输入Host信息
2022-12-08 22:36:08
363
原创 python报‘AttributeError: type object ‘datetime.datetime‘ has no attribute ‘datetime‘‘错误的原因及解决方案
在运行以下代码时出现报错AttributeError: type object ‘datetime.datetime’ has no attribute ‘datetime’原因:在导入模块使用from datetime import datetime，由于包名和类名一样，导致系统识别出现混乱，无法知道哪个是具体包和类解决方案：直接使用import datetime进行导包即可
2022-12-06 18:00:37
12713
原创 关于hdfs突然无法上传下载文件的解决方法（Couldn‘t upload the file）
关于hdfs上传文件报Couldn't upload the file的解决方案
2022-10-11 23:17:59
8870
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人