Data Engineer - Platform Engineer H/F - Pôle Emploi Paris 3e - 75
- Bac +3, Bac +4
- Bac +5
- Service public des collectivités territoriales
- Exp. - 1 an
En tant qu'Ingénieur Data vous serez responsable de la création et de l'optimisation de l'infrastructure de données et des pipelines qui alimentent nos analyses, modèles d'apprentissage automatique et processus de prise de décision.
Les responsabilités clés comprennent :
- La conception de l'infrastructure de données : Concevoir, implémenter et gérer une plateforme de données évolutive en utilisant des outils tels qu'Apache Kafka, Redpanda et des services de données cloud.
- Le développement de pipelines de données : Construire des pipelines robustes d'ingestion, de transformation et de traitement des données en utilisant des cadres ETL/ELT.
- Le Data Warehousing : Concevoir et gérer des data warehouse qui soutiennent les analyses et les rapports, en garantissant l'intégrité, la précision et l'accessibilité des données. Avec des modèles de bases de données multiples tels que PostgreSQL, neo4j ou memgraph, ChromaDB.
- La gouvernance des données : Mettre en oeuvre les meilleures pratiques de gouvernance des données, de sécurité et de confidentialité sur la plateforme.
- La scalabilité et performance : Assurer que l'infrastructure de données peut évoluer pour répondre aux besoins croissants de l'organisation et optimiser la performance pour de grands ensembles de données.
- La collaboration : Travailler en étroite collaboration avec les data scientists, les analystes et les autres ingénieurs pour fournir des solutions de données répondant aux besoins de l'entreprise.
La surveillance et la maintenance : Surveiller les systèmes de données pour garantir une haute disponibilité et des performances optimales, résoudre les problèmes et garantir l'exactitude et la qualité des données.
- L'automatisation : Automatiser les flux de travail de données et la fourniture d'infrastructure en utilisant IaC et des outils tels que Kuberntes d'orchestration tels que Kubernetes
Les responsabilités clés comprennent :
- La conception de l'infrastructure de données : Concevoir, implémenter et gérer une plateforme de données évolutive en utilisant des outils tels qu'Apache Kafka, Redpanda et des services de données cloud.
- Le développement de pipelines de données : Construire des pipelines robustes d'ingestion, de transformation et de traitement des données en utilisant des cadres ETL/ELT.
- Le Data Warehousing : Concevoir et gérer des data warehouse qui soutiennent les analyses et les rapports, en garantissant l'intégrité, la précision et l'accessibilité des données. Avec des modèles de bases de données multiples tels que PostgreSQL, neo4j ou memgraph, ChromaDB.
- La gouvernance des données : Mettre en oeuvre les meilleures pratiques de gouvernance des données, de sécurité et de confidentialité sur la plateforme.
- La scalabilité et performance : Assurer que l'infrastructure de données peut évoluer pour répondre aux besoins croissants de l'organisation et optimiser la performance pour de grands ensembles de données.
- La collaboration : Travailler en étroite collaboration avec les data scientists, les analystes et les autres ingénieurs pour fournir des solutions de données répondant aux besoins de l'entreprise.
La surveillance et la maintenance : Surveiller les systèmes de données pour garantir une haute disponibilité et des performances optimales, résoudre les problèmes et garantir l'exactitude et la qualité des données.
- L'automatisation : Automatiser les flux de travail de données et la fourniture d'infrastructure en utilisant IaC et des outils tels que Kuberntes d'orchestration tels que Kubernetes
Commentaires
Bienvenue dans les commentaires de postelibre! Gardez les conversations courtoises et sur le sujet. favoriser des conversations productives et respectueuses,
Vous pouvez voir les commentaires de nos gestionnaires communautaires.
Inscrivez-vous pour publier
Connectez-vous pour afficher plus de commentaires
tu es intéressé par
Recommandé pour vous
- > Corse
- > Graphisme
- > Pays de la Loire
- > Formation
- > Agricole
- > Agroalimentaire
- > Ferroviaire
- > BTP
- > Commerce
- > Outre Mer
- > Hospitalier
- > Communication
- > Environnement
- > Finance
- > Gestion
- > Occitanie
- > Sécurité
- > Assurance
- > Hauts-de-France
- > Tourisme
- > Ingénierie
- > Nouvelle-Aquitaine
- > Industrie
- > Edition
- > Centre-Val de Loire
- > Nettoyage
- > Aeronautique
- > Service
- > Service Public
- > Electronique
- > Provence-Alpes-Côte d'Azur
- > Audit
- > Grand Est
- > Transport
- > Secrétariat
- > Santé
- > Immobilier
- > Automobile
- > Comptabilité
- > Chimie
- > Beauté
- > Défense
- > Direction
- > Recherche
- > SAV
- > Enseignement
- > Production
- > Biotechnologie
- > Auvergne-Rhône-Alpes
- > Restauration
- > Logistique
- > Bretagne
- > Vente
- > Ressources Humaines
- > Telecom
- > Artisanat
- > Informatique
- > Pub
- > Architecture
- > Bourgogne-Franche-Comté
- > Juridique
- > Audiovisuel
- > Normandie
- > Achat
- > Marketing
- > Hotellerie
- > Nautisme
- > Administratif
- > Distribution
- > Culture
- > Île-de-France
- > Qualité
- > Social
- > Banque