Data Engineer Aws (h/f)

Néosoft est un groupe indépendant de conseil en transformation digitale de 1700 collaborateurs réunis en communautés d’experts : Conseil & Agilité, Cybersécurité, Data, DevOps, Infrastructures & Cloud et Software Engineering.

Nous plaçons l’excellence et le dépassement de soi au cœur de notre modèle. En effet, depuis sa création à Rennes en 2005, Néosoft conseille et accompagne ses clients à 360° dans leurs projets d’innovation sur nos 6 marchés cibles : Assurance & Protection sociale, Banque & Finance, Energie & Industrie, Retail & e-commerce, Secteur Public, Télécom & Médias..

Concevoir, développer et maintenir des pipelines de réplication et de traitement de données issues des sources hétérogènes, dans un contexte international, vers une plateforme de données centralisée sur AWS.

Responsabilités :

- Développement de pipelines ETL/ELT avec Airflow, Python, SQL.

- Connexion aux bases sources (Exadata, Oracle, etc.).

- Intégration des données dans AWS (S3, Kinesis, DMS, Lambda...).

- Nettoyage, mapping, déduplication et enrichissement des données.

- Collaboration avec les ’architectes pour appliquer les modèles cibles.

- Documentation technique et référentiels.

- Concevoir et mettre en œuvre les flux de réplication.

- Harmoniser et transformer les données.

- Automatiser les pipelines de données.

- Développer des Pipelines Gitlab CI/CD.

- Développer d'IaC pour des architectures sophistiquées full AWS avec Terraform, Ansible et Python.

- Contribuer au FinOps.

Compétences :

- Aptitudes : Être dynamique, proactif, autonome, et ouvert d'esprit, bon communicant avec une grande curiosité scientifique.

- Très bonne maîtrise de l’écosystème AWS (S3, Kinesis, DMS, Lambda…).

- Très bonne maîtrise des bases des données et des Data warehouses (Exadata, Oracle, SQL Server, Snowflake, etc.).

- Maitrise des langages : SQL, Python.

- Maîtrise des outils de traitement et d’orchestration (Apache Airflow, dbt, Python, SQL).

- Bonne expérience en Terraform pour l’IaC.

- Connaissance de GitLab CI/CD pour l’automatisation des déploiements.

- Expérience avec des CRM.

- Connaissance des problématiques de data quality, modélisation, monitoring et alerting.

- Expérience : Justifier d'au moins 6 ans d'expérience en tant que Data Engineer ou Ingénieur Intégration Data dans des environnements dans un environnement similaire.

- Une ou plusieurs certifications (AWS, Snwoflake, Terraform, etc.) sont fortement appréciées.

- Langues : Maîtrise de l'anglais courant.