Apache Oozie

Apache Oozie est une application Web open source écrite en Java et disponible sous la licence Apache 2.0. Il est défini comme un système de planification, conçu et déployé pour gérer et exécuter des tâches de la Stack Hadoop, dans un environnement de stockage distribué.

Un workflow Oozie est un ensemble d'actions organisées dans un Graphe orienté acyclique (DAG). La chronologie des tâches, ainsi que les règles de début et de fin du workflow, sont déterminées par les nœuds de contrôle, et l'exécution des tâches est déclenchée par les nœuds d'action. Il supporte une variété d'actions de l'écosystème Hadoop (notamment Apache MapReduce et Apache Pig), ainsi que des tâches spécifiques au système (telles que les scripts shell).

Le coordinateur Oozie vous permet d'exécuter régulièrement des workflows Oozie, à un moment donné, en fonction de la disponibilité des données ou lorsqu'un événement se produit. Une tâche du workflow est lancée lorsque les conditions sont réunies.

Oozie bundle est une combinaison de plusieurs coordinateurs et de workflows qui en gère le cycle en vie.