Société : Phaidon London- Glocomms Lieu : Site source : Talent BE
Description du poste :
En tant qu?Ingénieur de données AWS indépendant, vous jouerez un rôle vital dans la conception et l?optimisation de solutions de données évolutives sur la plateforme AWS afin de soutenir les initiatives basées sur les données dans le secteur des services publics.
Vous collaborerez étroitement avec des équipes pluridisciplinaires pour concevoir des pipelines de données et garantir la fiabilité et l?efficacité des processus de données.
Ce poste offre une opportunité passionnante de contribuer à l?avancement de l?analyse de données et de la prise de décision dans le secteur des services publics.
Responsabilités :
Concevoir et mettre en ?uvre des pipelines de données de bout en bout sur AWS pour prendre en charge l?ingestion, le traitement, la transformation et le stockage des ensembles de données liés aux services publics.
Développer et maintenir des flux de travail ETL en utilisant des services AWS tels que Amazon S3, AWS Glue, AWS Lambda, Amazon Redshift et Amazon EMR.
Optimiser les pipelines de données pour les performances, la scalabilité et la rentabilité, en respectant les meilleures pratiques AWS et les normes de l?industrie.
Collaborer avec les analystes de données et les experts du domaine pour comprendre les besoins métier et garantir que les solutions de données répondent aux besoins opérationnels.
Mettre en ?uvre des mesures de gouvernance des données et de sécurité pour garantir l?intégrité des données et la conformité aux exigences réglementaires dans le secteur des services publics.
Surveiller les performances des pipelines de données, résoudre les problèmes et mettre en ?uvre des solutions proactives pour maintenir la fiabilité et l?efficacité opérationnelle du système.
Documenter les conceptions techniques, les processus et les procédures pour faciliter le partage des connaissances et garantir la scalabilité et la maintenabilité des solutions de données.
Exigences :
Diplôme de premier cycle ou de troisième cycle en informatique, en ingénierie ou dans un domaine connexe.
Expérience avérée en tant qu?ingénieur de données concevant et mettant en ?uvre des solutions de données sur la plateforme AWS.
Connaissance approfondie des services AWS tels que S3, Glue, Lambda, Redshift, EMR et des technologies de stockage de données pertinentes.
Maîtrise des langages de programmation tels que Python, Java ou Scala pour la construction de pipelines de données et de processus ETL.
Compréhension approfondie des bases de données relationnelles et non relationnelles, SQL et des concepts de modélisation de données.
Expérience dans le secteur des services publics ou dans des domaines connexes est un plus.
Excellentes compétences en résolution de problèmes et capacité à travailler efficacement dans un environnement d?équipe pluridisciplinaire et collaboratif.
Compétences de communication efficaces avec la capacité d?interagir avec les parties prenantes à tous les niveaux.
Lieu :
Entièrement à distance (Basé en Belgique) Durée :
Opportunité indépendante à long terme PhaidonLondon- Glocomms
