Stage Consultant Data Engineer

Stage / Paris

Professionnel Ouvert Innovant Engagé Utile Leader

Soft Computing est leader du conseil en sciences et en technologies de la data et du digital appliquées au marketing et à l’expérience client. Cotée sur Nyse Euronext, elle emploie plus de 400 experts, réalise 41 M€ de CA, pour 20% à l’international, avec 200 clients, dont la plupart des grandes entreprises du retail, de la finance et des services.

Dans le cadre d’un stage de pré-embauche, vous rejoindrez le centre de compétences « Data Lake Delivery» qui se positionne sur la prise en charge de besoins techniques autour des technologies Hadoop/ Big Data, en particulier dans le traitement des données au fil de l’eau, l’industrialisation de ces besoins et la mise à disposition d’un environnement logiciel et applicatif répondant aux spécificités de ces technologies.

Sous la responsabilité d’un maître de stage, vous serez amené(e) à traiter un des sujets suivants :

Gestion des logs avec HDFS sur notre Big Data Appliance (BDA) d’Oracle

Mettre en place une fédération de logs d’un ensemble de serveurs en vue d’une analyse de défaillance et de détection d’intrusion.

  • Réalisation en HDFS avec SolR et Spark
  • Réalisation en Elastic Search
  • Proposer un Log Management (Logstash, …) et sa visualisation (Grafana, …)

 

Big Data sur Azure (avec expérience opérationnelle dans un contexte client)

  • Monter un cluster Big Data DFS/Spark/Hive sur Azure.
  • Faire une analyse comparative Azure et AWS sur des programmes étalons à réaliser en Spark (avec dataset identique).

 

Big Data sur AWS (avec expérience opérationnelle dans un contexte client)

  • Monter un même cluster Big Data DFS/Spark/Hive sur AWS.
  • Faire une analyse comparative Azure et AWS sur des programmes étalons à réaliser en Spark (avec dataset identique).

 

Use Case Spark Streaming et Kafka (Devops avec 3 environnements (Dev, UAT, Prod).

  • Monter un cluster Kafka a minima 3 nœuds
  • Créer un jeu de programmes client simulant de l’IoT et les programmes Spark consommant des IoT.
  • Puis une réalisation sur notre OBDA, à partir des données météo nationale et sa visualisation (Grafana, …).

Dans tous les sujets, vous suivrez le processus projet (approche Agile) impliquant tous les acteurs de ce mini-projet : stagiaire, encadrement, métier, architecte et exploitant.

De formation d’ingénieur ou universitaire (niveau master II), vous êtes spécialisé en informatique/programmation/développement, avec une orientation Data/Big Data.

Votre niveau d’anglais est opérationnel à l’oral.

Vous maîtrisez Linux (Centos/Redhat), les protocoles réseau et les grands principes de sécurité

Vous avez suivi une formation pratique aux environnements distribués Big Data (HDFS, Hive, Spark..)

Vous avez envie de monter en compétences sur une plateforme Big Data sous l’angle de la gouvernance des données accompagné d’outils de développement type Talend/PySpark.

 

Vos avantages :

Votre indemnité mensuelle brute de stage sera de 1.300 €.

De plus, vous bénéficierez de tickets restaurant d’une valeur de 8,50 € par jour travaillé (avec une participation employeur de 4,89 €) et du remboursement de 50 % de votre titre de transport.

Choisissez…

Une opportunité d’embauche,

Notre management de proximité,

Notre centre de compétence spécialisé en BIG DATA,

Un parcours collaborateur dédié et de nombreuses possibilités d’évolutions,

Notre diversité de projets et de clients (BPCE, Leclerc, Pages Jaunes, SFR, Fnac…),

Notre fort investissement dans l’innovation (20 projets par an).

Notre leadership technologique et métier depuis 30 ans.

Postuler