Analyste en intégration de données
American Iron & Metal Voir toutes les offres
- Laval, QC
- Permanent
- Temps-plein
- Développer des flux de travail automatisés de nettoyage et de validation des données à l'aide de notebooks Python et PySpark, ainsi que de pipelines Databricks, pour soutenir un projet de science des données.
- Créer des pipelines d'ingestion robustes dans Databricks pour charger, traiter et préparer efficacement les données en vue de l'analyse et de la modélisation en aval.
- Garantir la traçabilité complète des méthodologies de nettoyage des données en concevant des flux de travail conformes à l'architecture Medallion (Bronze → Argent → Or), en maintenant une provenance claire et la reproductibilité.
- Mise en place de normes d'entreprise pour les carnets de nettoyage de données afin d'améliorer la lisibilité, la cohérence, la maintenabilité et la facilité de partage entre les équipes.
- Développement de fonctions réutilisables et bien documentées (le cas échéant), lisibles, modulaires et dotées de mécanismes de gestion des erreurs robustes pour garantir un traitement des données évolutif et fiable.
- Baccalauréat ou maîtrise en informatique, science des données, ingénierie des données ou domaine connexe.
- 1 à 2 ans d'expérience dans un environnement professionnel similaire.
- Une expérience d'un an dans la création de pipelines d'ingestion avec PySpark et Azure Databricks est un atout majeur.
- Expérience pratique de projets de science des données en entreprise, notamment en matière de préparation et de validation des données pour la modélisation.
- Maîtrise de Python, incluant l'utilisation des notebooks Jupyter, d'Azure Data Warehouse et des notebooks Databricks/Fabric/PySpark.
- Une expérience en analyse exploratoire des données (EDA) et en nettoyage stratégique des données pour des initiatives de science des données est un atout majeur.
- Congés payés dès le premier jour ;
- Assurance collective complète ;
- Télémédecine (accès illimité à un médecin 24 h/24 et 7 j/7)
- REER collectif avec contribution de l'employeur ;
- Bourses d'études AIM ;
- Programme de recommandation ;
- Rabais exclusifs pour les employés sur les pièces dans tous les établissements Honeycomb ;
- Activités d'entreprise tout au long de l'année (barbecue, fête de Noël, etc.) ;
- Excellentes possibilités d'avancement.