web-dev-qa-db-fra.com

apache-airflow

paramètre de passage de flux d'air de cli

Comment arrêter / tuer le planificateur de flux d'air démarré en mode démon

Flux d'air: le fichier journal n'est pas local, emplacement de journal distant non pris en charge

Les tâches de flux d'air restent bloquées à l'état "en file d'attente" et ne s'exécutent jamais

Le flux d'air dépend de sur le DAG entier

Dag.py augmente: "Airflow.Exception.AirFlowException: la tâche manque au paramètre start_date", mais sa donnée en code

Comment arrêter/supprimer les tâches Airflow à partir de l'interface utilisateur

Comment redémarrer une tâche ayant échoué sur Airflow

Comment obtenir le JobID pour les analyses de flux d'air?

Etat de la tâche Airflow dans le dag

Débogage des DAG cassés

Structure du flux d'air / organisation des Dags et des tâches

Airflow: passez {{ds}} en paramètre à PostgresOperator

Comment fonctionne BranchPythonOperator d'Airflow?

Comment configurer la configuration de messagerie d'Airflow pour envoyer un e-mail en cas d'erreur?

Faire des macros Airflow personnalisées étendre d'autres macros

Comment ajouter de nouveaux DAG à Airflow?

Débit d'air par défaut on_failure_callback

Comment obtenir et traiter des enregistrements mysql à l'aide d'Airflow?

Problèmes d'exécution du planificateur de flux d'air en tant que processus démon

Comment accéder à la réponse de la requête GET Airflow SimpleHttpOperator

Apache Airflow DAG ne peut pas importer de module local

Echec de la configuration de l'authentification Airflow avec "AttributeError: impossible de définir l'attribut"

fuseau horaire par défaut d'apache-airflow 1.9 défini sur non utc

Moyen efficace de déployer des fichiers DAG sur un flux d'air

Le planificateur de flux d'air est lent à planifier les tâches suivantes

Lequel choisir Apache Oozie ou Apache Airflow? Besoin d'une comparaison

Intégration de Kubernetes avec Apache Airflow

Tâches dynamiques de flux d'air lors de l'exécution

Configuration du flux d'air

Airflow: création d'un DAG dans l'airflow via l'interface utilisateur

Airflow 1.9.0 met en file d'attente mais ne lance pas de tâches

Supprimer les journaux Airflow Scheduler

Pourquoi une tâche est-elle bloquée et non exécutée dans le flux d'air?

Airflow S3KeySensor - Comment continuer à fonctionner

Comment ignorer des tâches sur Airflow?

Le flux d'air 1.10.3 Subdag ne peut exécuter que 1 tâche en parallèle même la concurrence est de 8

Comment résoudre la connexion DB Avertissement invalide dans le planificateur d'airflow?

Travailleur de flux d'air Stubal: Tâche est dans l'état "Exécution" qui n'est pas un état valide pour l'exécution. La tâche doit être effacée pour être courante

Utiliser un cas d'opérateur factice

Errno 13 Autorisation refusée lorsque Airflow essaie d'écrire dans les journaux

Le planificateur de flux d'air ne démarre pas avec l'exécuteur Kubernetes

Flux d'air: déclencheur DAG via UI avec paramètres / config

Comment déclencher un DAG sur le succès d'un autre DAG dans Airflow en utilisant Python?

Architecturer le DAG Airflow qui nécessite une régulation contextuelle

APACHE NIFI vs Apache AIRFLOW vs Apache FALCON? Ce qui convient le mieux dans le scénario ci-dessous?

Airbnb Airflow vs Apache Nifi

Comment exécuter Spark code dans Airflow?

Airflow "Ce DAG n'est pas disponible dans l'objet DagBag du serveur Web"

Python planification de script dans airflow

Apache Airflow ou Apache Beam pour le traitement de données et la planification de travaux

Comment intégrer Apache Airflow avec slack?

Airflow SparkSubmitOperator - Comment envoyer des étincelles sur un autre serveur

AttributeError: l'objet 'MSVCCompiler' n'a pas d'attribut 'linker_exe'

Erreur lors de la transmission de métadonnées à DataProcClustercreateOperator

Comment convertir un RDD avec une colonne SparseVector en un DataFrame avec une colonne en tant que vecteur

Encoder et assembler plusieurs fonctionnalités dans PySpark

Erreur du codeur lors de la tentative de mappage de la ligne dataframe sur la ligne mise à jour

Spark 2.0 Dataset vs DataFrame

Comment préparer des données au format LibSVM à partir de DataFrame?

Encodeur pour le type de ligne Spark Datasets

Nom de la colonne avec un point spark

Comment exécuter Airflow sous Windows

Airflow - fichier Python PAS dans le même dossier DAG

Comment fonctionner correctement airflow schedule_interval

execution_date in airflow: nécessité d'accéder à une variable

Déclencher un DAG Airflow depuis un terminal ne fonctionne pas

Comment installer le flux d'air?

Comment définir les dépendances entre les DAG dans Airflow?

Parallélisme du flux d'air

Comment fonctionne exactement le sous-DAG dans Airflow? Que signifie l'activation d'un sous-DAG?

Paramètres de passage du flux d'air vers la tâche dépendante

Comment empêcher le flux d'air de remblayer les passes?

Pendant le flux d'air initdb, ImportError: impossible d'importer le nom HiveOperator

Comment redémarrer le serveur Web Airflow?

DAG dynamique et ID de tâche Airflow

Airflow: comment faire pour SSH et exécuter BashOperator à partir d'un autre serveur

Comment utiliser AirFlow pour exécuter un dossier de fichiers python?

airflow trigger_dag execution_date est le lendemain, pourquoi?

Précisions sur le remblayage

Airflow connexion s3 en utilisant l'interface utilisateur

Écriture dans les journaux de flux d'air

Comment exécuter le fichier de script bash dans Airflow

Airflow: PythonOperator: pourquoi inclure l'argument 'ds'?

Airflow: comment supprimer un DAG?

Méthode appropriée pour créer des flux de travail dynamiques dans Airflow

Quelle est la différence entre la règle de déclenchement du flux d'air "all_done" et "all_success"?

Flux d'air à l'aide de fichiers de modèle pour PythonOperator

Comment exécuter un DAG de flux d'air simple

Erreur TemplateNotFound lors de l'exécution de Airflow BashOperator simple

Apache Airflow: Contrôle de la journalisation [Désactiver/Ajuster le niveau de journalisation]

Exécution d'un travail sur un flux d'air basé sur Webrequest

Airbnb Airflow utilisant toutes les ressources du système

Fichiers externes dans Airflow DAG

Comment forcer une tâche sur le flux d'air à échouer?

Flux d'air: Impossible de trouver dag_id

Comment supprimer les exemples d'exemple par défaut dans le flux d'air

Exemple de DAG bloqué dans l'état "en cours d'exécution" indéfiniment

Flux d'air: tâches en attente mais non exécutées

Suppression des journaux de tâches Airflow