图文并茂 —— 基于Oozie调度Sqoop

简介:

利用大数据来做BI分析的时候,必不可少需要设置一些调度任务。

本篇就讲述一下如何利用hue来编辑shell操作,这里面的很多操作在其他的调度操作里面也是可以借鉴的。

如果是linux里面可以直接执行的脚本,那么可以直接在hue里面使用,比如:

449064-20170228223419860-1209013723.png

如果有参数,可以点击Arguments添加

449064-20170228223430829-850427119.png

如果你使用了${value}变量,那么在执行任务的时候,就需要指定value参数

449064-20170228223438641-1165561784.png

点击启动时:

449064-20170228223446595-804556420.png

如果想要调用一个可执行的脚本,那么就需要把这个脚本拷贝到Hdfs上,然后选择Choose in files指定该文件,并且填写相应的名字

449064-20170228223454360-1122317206.png

其他的一些属性,可以通过点击右上角的配置按钮来设置。

在下一个版本,hue会支持标准的unix命令,而不是简简单单的一个命令。

本文转自博客园xingoo的博客,原文链接:图文并茂 —— 基于Oozie调度Sqoop,如需转载请自行联系原博主。
相关文章
|
SQL 分布式计算 Hadoop
Azkaban--使用实战--hive 调度 | 学习笔记
快速学习 Azkaban--使用实战--hive 调度
648 0
Azkaban--使用实战--hive 调度 | 学习笔记
|
存储 缓存 资源调度
想了解流计算,你必须得看一眼,实现Flink on Yarn的三种部署方式,并运行wordcount
想了解流计算,你必须得看一眼,实现Flink on Yarn的三种部署方式,并运行wordcount
637 0
想了解流计算,你必须得看一眼,实现Flink on Yarn的三种部署方式,并运行wordcount
|
1月前
|
SQL XML 分布式计算
Oozie功能
Oozie是一个基于Hadoop的调度器,它可以用来管理和协调Hadoop作业、Pig作业、Hive作业、Shell脚本等。【2月更文挑战第21天】
17 2
|
5月前
|
分布式计算 Java Hadoop
70 Azkaban MAPREDUCE任务
70 Azkaban MAPREDUCE任务
20 0
|
Web App开发 分布式计算 资源调度
大数据开发之Hadoop 伪分布式安装(4)【完结】
你好看官,里面请!今天笔者讲的是大数据开发之Hadoop 伪分布式安装(4)。不懂或者觉得我写的有问题可以在评论区留言,我看到会及时回复。 注意:本文仅用于学习参考,不可用于商业用途,如需转载请跟我联系。
137 1
大数据开发之Hadoop 伪分布式安装(4)【完结】
|
资源调度 Oracle Java
Flink on Yarn三部曲之一:准备工作
搭建Flink on Yarn环境并体验,本文是三部曲第一篇,将部署前的准备工作做好
132 1
Flink on Yarn三部曲之一:准备工作
|
SQL 存储 Java
Apache Oozie一 实战操作一调度 hive 脚本|学习笔记
快速学习 Apache Oozie一 实战操作一调度 hive 脚本
276 0
Apache Oozie一 实战操作一调度 hive 脚本|学习笔记
|
SQL 分布式计算 Hadoop
Azkaban--使用实战--hadoop 调度(hdfs、mapreduce) | 学习笔记
快速学习 Azkaban--使用实战--hadoop 调度(hdfs、mapreduce)
564 0
Azkaban--使用实战--hadoop 调度(hdfs、mapreduce) | 学习笔记
|
SQL 数据可视化 大数据
集成 Oozie 服务&调度 Hive 脚本 | 学习笔记
快速学习 集成 Oozie 服务&调度 Hive 脚本
92 0
集成 Oozie 服务&调度 Hive 脚本 | 学习笔记
|
分布式计算 API 调度
Apache Oozie-- 实战操作--集成 hue& 调度 mapreduce 程序|学习笔记
快速学习Apache Oozie-- 实战操作--集成 hue& 调度 mapreduce 程序
143 0
Apache Oozie-- 实战操作--集成 hue& 调度 mapreduce 程序|学习笔记