Oozie-应用及案例

1、案例一:Oozie 调度 shell 脚本

目标:使用 Oozie 调度 Shell 脚本,分步实现:

1) 解压官方案例模板

2) 创建工作目录

3) 拷贝任务模板到 oozie-apps/目录

4) 随意编写一个脚本 p1.sh

5) 修改 job.properties 和 workflow.xml 文件

job.properties

workflow.xml

6) 上传任务配置

7) 执行任务

8) 杀死某个任务

2、案例二:Oozie 调度 MapReduce 任务

目标:使用 Oozie 调度 MapReduce 任务,分步执行:

1) 找到一个可以运行的 mapreduce 任务的 jar 包(可以用官方的,也可以是自己写的)

2) 拷贝官方模板到 oozie-apps

3) 测试一下 wordcount 在 yarn 中的运行

4) 配置 map-reduce 任务的 job.properties 以及 workflow.xml

job.properties

workflow.xml

5) 拷贝待执行的 jar 包到 map-reduce 的 lib 目录下

6) 上传配置好的 app 文件夹到 HDFS

7) 执行任务

猜你喜欢

转载自blog.csdn.net/liberty12345678/article/details/86560217