Ingénieur(e) de données

Profil recherché :

• Détenir au moins 5 ans d’expérience dans en Intelligence d’affaire ou tout autre domaine pertinent au traitement de données. Une expérience dans le domaine des ETL est un atout

• Bonne connaissance d’au moins un outil de cédule, idéalement TWS

• Expérience dans l’administration des clusters Hadoop est un atout

• Expérience dans le scripting Shell avancé (Linux /Redhat 6 .x et plus)

• Connaissance de Kerberos et LDAP est un atout

• Expérience en implémentation de politique de sécurité sur Hadoop est un atout

• Bonne connaissance des Framework d’ingestion de données (l’Ingestion de données vers des systèmes Hadoop est un atout)

• Expérience dans le traitement de grandes quantités de données structurées et non structurées (NoSql, HBase)

• Expérience avec l’ingestion de données en temps réel est un atout

• Maîtrise du développement de scripts Python, Spark et Scala

• Très bonne connaissance de Hadoop : MapReduce, HDFS, Ambari, Sqoop, Flume, Kafka, Pig, Hive et Spark

• Expérience avec l'intégration des données provenant de multiples sources de données (BD, fichiers plats et MainFrame)

• Avoir déjà travaillé dans un projet agile

• Avoir de bonnes habiletés de communication et de vulgarisation de concepts complexes

• Avoir de solides compétences pour la résolution de problèmes

• Être un bon collaborateur d’équipe

• Assurer une vigie pour se développer et maintenir son niveau de connaissances à jour