Détails

Cette offre n'est plus disponible
Octopeek

data engineer " F/H" Java / Spark

  • Octopeek
  • CDI
  • Informatique
  • Enghien-les-Bains (95880)
  • Entre 45k€ et 50k€
  • 1 à 2 ans
Vous cherchez une belle mission, ne la cherchez plus elle est la

Le poste

Contexte & Environnement

Poste : Consultant data et développeur Java

Rôle : • Construction du socle d’alimentation des données. • Optimisation des jobs Spark existants et amélioration de la gestion des erreurs. • Mise en place de l’architecture micro-service et streaming des données golden source. • Ingestion, préparation et exposition des données sources (Batchs & streaming) et interfaçage avec les API Rest. • Mise en place de l’infrastructure et des scripts de déploiement avec les équipes ops à Paris et Singapoure. • Développement des micros-services, des batchs et des règles et contrôles métiers. • Migration des bases de données (Oracle -> PostgreSQL) • Faire le suivi des tâches de développement de l’équipe, point d’équipe quotidien et hebdomadaire et cérémonie Agile. • Respecter la qualité du code et la documentation technique. • Analyse des tâches fonctionnelles, rédaction des spécifications techniques et estimation des charges de développement.

Environnement technique:

Technologies, Logiciels & Outils : Java 8/11, Kafka, Spark, Hive, Zeppelin, Spring boot, Docker, Kubernetes, Ansible, PostgreSQL, HDFS, Oracle, Groovy, Shell, Jenkins (pipeline), Master Deploy, REST Services, Jira, Gitlab, Intellij, MobaXtrem... Standards & Méthodes (Méthodologie Agile, SCRUM)

Missions & Profil

Poste : Consultant data et développeur Java

Rôle : • Construction du socle d’alimentation des données.

• Optimisation des jobs Spark existants et amélioration de la gestion des erreurs.

• Mise en place de l’architecture micro-service et streaming des données golden source.

• Ingestion, préparation et exposition des données sources (Batchs & streaming) et interfaçage avec les API Rest.

• Mise en place de l’infrastructure et des scripts de déploiement avec les équipes ops à Paris et Singapoure.

• Développement des micros-services, des batchs et des règles et contrôles métiers.

• Migration des bases de données (Oracle -> PostgreSQL)

• Faire le suivi des tâches de développement de l’équipe, point d’équipe quotidien et hebdomadaire et cérémonie Agile.

• Respecter la qualité du code et la documentation technique.

• Analyse des tâches fonctionnelles, rédaction des spécifications techniques et estimation des charges de développement.

Environnement technique:

Technologies, Logiciels & Outils : Java 8/11, Kafka, Spark, Hive, Zeppelin, Spring boot, Docker, Kubernetes, Ansible, PostgreSQL, HDFS, Oracle, Groovy, Shell, Jenkins (pipeline), Master Deploy, REST Services, Jira, Gitlab, Intellij, MobaXtrem... Standards & Méthodes (Méthodologie Agile, SCRUM)

L'entreprise

Octopeek est une société de conseil, de formation dans le Big Data et l’IA pour les entreprises. La mission d'Octopeek est de faciliter l’accès à la data et permettre aux entreprises de décider en s’appuyant facilement sur des données : transformer la technologie en bénéfices pour le quotidien de chacun.Avec l'offre BigAI, Octopeek permet aux entreprises de développer un projet stratégique de développement en lien avec la data et l’intelligence artificielle sous forme de consulting outillé en intégrant les offres de ses partenaires technologiques (Snowflake, Data Robot, AWS, Azure, GCP) et sa future solution Data (Octopeek Integration Tool).