Automatisez et monitorez votre ingestion de données grâce à Airflow

Tirer profit des données de production pour améliorer nos algorithmes de machine learning quotidiennement, tel est notre besoin chez Sicara. Pour être rapide lors de cette phase de progression, il faut limiter au maximum les interventions manuelles et donc automatiser notre flux d’ingestion de données. Lors de ce talk, je présenterai la mise en place de notre flux automatisé avec Airflow ainsi que les apprentissages que nous en avons tirés.