精华内容
下载资源
问答
  • azkaban

    2020-07-14 17:46:18
    azkaban

    1、概述

    azkaban是一个批量工作流任务调度器,主要用于在一个工作流内以一个特定的顺序运行一组工作和流程,它的配置是通过简单的key:value对的方式,通过配置中的dependencies 来设置依赖关系。Azkaban使用job配置文件建立任务之间的依赖关系,并提供一个易于使用的web用户界面维护和跟踪你的工作流。

    2、结构

    3、启动和关闭

    //executor
    azkaban/executor/bin/azkaban-executor-start.sh
    azkaban/executor/bin/azkaban-executor-shutdown.sh
    
    //web-server
    azkaban/server/bin/azkaban-web-start.sh
    azkaban/server/bin/azkaban-web-shutdown.sh

    注意:先执行executor,再执行web,避免Web Server会因为找不到执行器启动失败

    4、简单案例

    mapreduce.job

    type=command
    command=/opt/module/hadoop-2.7.2/bin/hadoop jar /opt/module/hadoop-2.7.2/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar wordcount /wordcount/input /wordcount/output
    

    打包上传执行

    展开全文
  • Azkaban

    2020-02-01 14:00:15
    Azkaban

    Azkaban

    展开全文

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 5,817
精华内容 2,326
关键字:

azkaban