weixin_74198527的博客

原创 Azkaban调度数仓（大学生实训版）

一些是代码编写的问题，还有一部分问题与集群有关，集群的性能好像也影响任务的执行，我中间还重启过一次集群(ㄒoㄒ)，好像是因为一个datanode节点不行了，呜呜呜～，反正前前后后各种问题都有，好在最后都解决了。在期末实训时，老师要求在搭建数仓时要加入Azkaban，我上网找了一堆教程，都是企业级数仓搭建，作为小白，看得迷迷糊糊，本篇分享一个简陋版数仓搭建（适合新手理解这个过程）中间遇到过挺多问题的，其他同学的基本半个小时左右就执行完毕了，我的前前后后尝试了一天才成功，中间还不停出错。