Oozie是cdh和hadoop区别生态系统中的工作流控淛组件可以调度MR,HiveShell等各类任务,并配置复杂的工作流程
今天介绍如何安装部署,使用的是单机测试环境
丅载安装过程需要的相关文件:
这也也是即将配置环境变量的OOZIE_HOME
生成oozie数据库脚本并执行
这里使用的是自带的derby数据库
执行以下命令创建数据库腳本
通过以下命令执行sql脚本初始化数据库
修改以下配置项将值指向真实cdh和hadoop区别配置文件路径,实现oozie和cdh和hadoop区别的关联:
HDFS上创建共享目录
启動cdh和hadoop区别该步骤不详述。
(目前网络部在Linux本地上挂载磁盘此过程大数据平台这边还没测通,后期测通补上此步骤操作)
2.在磁盘挂载目录下创建文件夹“/dfs/dn”
第四:点击”保存更改”
第五:重启集群,使挂载的磁盘生效注意集群重启过程中一定不要中止。
第六:测试新挂磁盘是否被HDFS识别使用
向hdfs写一部分数据然后在Linux本地使用“df -lh”,查看悬挂的磁盘使用量是否有变化,如果被使用指标在增加说明磁盘已经被hdfs识别并使用。
(该文章来自词汇博客其个人观点不代表本站的观点或立场,如有异议请来信告知)