淘宝双11数据分析与预测--“坑点”汇总

最新推荐文章于 2025-06-03 09:31:31 发布

weixin_33671935

最新推荐文章于 2025-06-03 09:31:31 发布

阅读量1.4k

点赞数

CC 4.0 BY-SA版权

文章标签： java 开发工具大数据

原文链接：https://segmentfault.com/a/1190000016676111

本文记录了在进行淘宝双11数据分析实验时遇到的问题及解决方案，包括Hadoop安装权限问题、JAVA_HOME环境变量设置、使用Sqoop导入数据的权限问题、Hive到MySQL的数据迁移错误以及在Eclipse中创建Dynamic Web Project的困扰。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

国庆假期留在学校做了一下林子雨博士的大数据实验--淘宝双11数据分析与预测，虽然教程写得很详细，但自己还是踩了很多坑，现在记录下来，希望给别人一点帮助。

淘宝双11数据分析与预测实验连接：点击这里

问题一：安装Hadoop时报错

报错内容：

Starting namenodes on [localhost]
localhost: mkdir: 无法创建目录"/usr/local/hadoop/logs": 权限不够
localhost: chown: 无法访问"/usr/local/hadoop/logs": 没有那个文件或目录
localhost: starting namenode, logging to /usr/local/hadoop/logs/hadoop-dblab-namenode-dblab-virtual-machine.out
localhost: /usr/local/hadoop/sbin/hadoop-daemon.sh: 行 159: /usr/local/hadoop/logs/hadoop-dblab-namenode-dblab-virtual-machine.out: 没有那个文件或目录
localhost: head: 无法打开"/usr/local/hadoop/logs/hadoop-dblab-namenode-dblab-virtual-machine.out" 读取数据: 没有那个文件或目录
localhost: /usr/local/hadoop/sbin/hadoop-daemon.sh: 行 177: /usr/local/hadoop/logs/hadoop-dblab-namenode-dblab-virtual-machine.out: 没有那个文件或目录
localhost: /usr/local/hadoop/sbin/hadoo

最低0.47元/天解锁文章

200万优质内容无限畅学