Description du poste d'ingénieur Big Data

Fiche de poste

Nous recherchons un ingénieur Big Data talentueux pour fournir des solutions Big Data. Ce poste requiert la conception et la maintenance de systèmes de données, la production de tableaux de bord pour afficher les résultats du big data en temps réel tout en travaillant dans un environnement inter-équipes.

Responsabilités

• Fournir des solutions de big data en construisant des systèmes de gestion de données basés sur Hadoop.
• Développer des systèmes en nuage pour le stockage et le transfert de données.
• Construire des tableaux de bord de visualisation des données qui fournissent des mesures clés en temps réel pour une meilleure prise de décision.
• Traduire les besoins de haut niveau des entreprises en conceptions détaillées des systèmes.
• Gérer et optimiser les lignes de communication entre les systèmes internes et entre les systèmes internes et les fournisseurs tiers.
• Collaborer avec différents services pour aider à la prise de décisions influencées par les données.
• Produire des rapports sur les données collectées, les méthodes de collecte et les idées générées.
• Présenter les résultats et les idées clés aux équipes de direction et aux équipes opérationnelles.
• Former les employés à la gestion et au stockage des données.
• Pour une série de projets et de campagnes, collecter et traiter des données brutes à grande échelle.
• Concevoir et construire des applications de données pour un certain nombre d'équipes et de projets.
• Selon les besoins et les demandes, lire, extraire, transformer, mettre en scène et charger des données dans des outils et des cadres sélectionnés.
• Intégrez votre travail dans nos systèmes de production en travaillant en étroite collaboration avec l'équipe d'ingénieurs.
• Transformez les données non structurées en un format prêt à l'analyse.
• Analyser les données traitées.
• Si nécessaire, une analyse ad hoc peut être utilisée pour soutenir les choix de l'entreprise.

Exigences

• Licence en informatique, en ingénierie informatique ou dans un domaine connexe
• Expérience de l'ingénierie et de l'analyse des données
• 3+ ans minimum de travail avec les big data
• Connaissance des langages de programmation, notamment SQL et Python
• Connaissance approfondie des systèmes Spark, Hadoop et SQL
• Familiarité avec AWS et Mesos
• Compétences exceptionnelles en matière de gestion de projets
• Excellentes capacités de communication et de présentation
• Curiosité et capacité à résoudre des problèmes