Analyste programmeur
Hadoop
Description Responsabilités:
• Implémentation du processus ETL
• Surveiller les performances et conseiller toute modification nécessaire
• Définir des politiques de conservation des données
• Intégration d’outils et de frameworks Big Data
• Proposer des moyens novateurs d’utiliser les technologies pour améliorer les opérations
• Fournir des prévisions techniques pour le développement de prototypes, la validation de concepts et des projets pilotes pour évaluer de nouvelles approches technologiques


Exigences:
• Baccalauréat en informatique, en mathématiques appliquées, en ingénierie ou dans tout autre domaine lié à la technologie. Un équivalent de la même expérience professionnelle est également accepté
• 3-5 ans d’expérience dans des rôles impliquant le développement Hadoop
• Expérience avec les technologies liées à l’Internet des objets (IoT)
• Connaissance de la gestion des grappes Hadoop et des principes opérationnels, avec tous les services inclus
• Capacité de résoudre ou de diagnostiquer tout problème lié au fonctionnement du cluster Hadoop
• Maîtrise de Hadoop v2.x, MapReduce, HDFS
• Expérience Storm ou Spark-Streaming.
• Bonne connaissance des outils d’interrogation Big Data, tels que Pig et Hive
• Expérience de l’intégration de données provenant de plusieurs sources de données
• Connaissance de diverses techniques et cadres ETL, tels que NiFi ou Flume
• Expérience avec divers systèmes de messagerie, tels que Kafka
• L’expérience avec Tensorflow est un atout certain
• Expérience des distributions Hadoop de Cloudera / MapR / Hortonworks avec une préférence Hortonworks
• La certification Hortonworks est un atout certain
• Expérience avec des bases de données NoSQL, telles que HBase, Cassandra, MongoDB, un atout
• Expérience avec Spark est un atout
i
N° de poste 2228
Lieu Montréal
Statut Contractuel