Data-erp
Ingénieur des données
Intermédiaire
Télétravail
CBZ Technologies
80 000 $ - 110 000 $ (Permanent)
65 $ - 90 $ (Pigiste)
Bâtissez les pipelines de données qui alimentent les analyses et les produits IA. Soyez l'architecte du patrimoine de données.
Responsabilités
- Concevoir et construire des pipelines de données robustes et évolutifs (ETL/ELT).
- Gérer les entrepôts de données et les lacs de données.
- Assurer la qualité, la fiabilité et la sécurité des données.
- Collaborer avec les scientifiques de données et les analystes pour préparer les données.
Exigences
- Avoir un minimum de TROIS (3) ans d’expérience comme ingénieur de données.
- Avoir fait l’exploitation de lacs et de bases de données basées sur les technologies S3 ou SQL tel que PostgreSQL, MySQL, Oracle.
- Avoir fait du développement de flux de données tels que ETL / ELT, Airflow, Streamsets, NiFi, etc.
- Avoir fait du développement à l’aide de langages communs tel que Python, Java, Scala, etc.
- Avoir fait du traitement de données massives et de la distribution avec des outils tel que Spark, Presto, Dask, Parquet, ORC, etc.
- Avoir utilisé des outils tels que Linux, Containers, OpenShift, Kubernetes, etc. dans le cadre de projets en mode DevOps.
- Avoir fait du développement de traitement de données en mouvement avec des outils tels que Stream Processing avec Spark, Kafka, etc.