airflow-expert

Cette compétence de Claude offre des conseils d'expert sur la mise en œuvre d'une architecture Data Mesh pour des systèmes de données décentralisés et évolutifs. Elle aide les développeurs à concevoir une gouvernance des données orientée domaine, à créer des produits de données et à établir une gouvernance fédérée avec des plateformes en libre-service. Utilisez cette compétence lors de la planification ou de la refonte d'infrastructures de données à grande échelle pour les aligner sur les domaines organisationnels.

Cette compétence de Claude fournit des conseils de niveau expert pour l'orchestration de flux de travail avec Apache Airflow, incluant la conception de DAG, les opérateurs, les capteurs et les dépendances entre tâches. Utilisez-la lors de la construction ou du dépannage de pipelines de données complexes pour mettre en œuvre des modèles fiables de planification et d'exécution. Elle couvre les opérations en production, les XComs et la génération dynamique de tâches pour une gestion évolutive des flux de travail.

Cette compétence permet la modélisation CAO paramétrique et la génération de maillages pour les structures marines en utilisant FreeCAD et GMSH. Elle automatise la création de géométries et la génération de maillages pour l'analyse par éléments finis (FEA) ou par équations intégrales (BEM) en hydrodynamique. Les développeurs peuvent l'utiliser pour exporter directement les modèles vers des outils d'analyse tels qu'AQWA, WAMIT et ANSYS.

Cette compétence de Claude fournit une assistance experte sur la plateforme Databricks pour concevoir et mettre en œuvre des pipelines de données évolutifs et des workflows de machine learning. Elle offre une connaissance approfondie d'Apache Spark, Delta Lake, MLflow, des notebooks et de la gestion des clusters pour l'architecture lakehouse. Utilisez cette compétence lorsque vous travaillez avec le SDK Databricks, PySpark, et que vous concevez des solutions de data engineering ou de ML sur la plateforme Databricks.