Stage InfraOps & DevOps - construction d'une offre PaaS Big Data & Kubernetes

Contexte

L’acquisition d’un cluster à forte capacité répond à la volonté d’Adaltas de construire une offre de type PAAS pour disposer et mettre à disposition des plateformes de Big Data et d’orchestration de conteneurs. Les plateformes sont utilisées pour l’acquisition de nouvelles compétences, l’évaluation de nouvelles technologies, l’utilisation d’outils DevOps et la mise à disposition d’environnements de développement, de PoCs et d’exploitation. Elles hébergent des Data Lakes, des DataLabs, des traitements et des modèles de Data Science, des outils orientés DevOps ou encore des services applicatifs. L’objectif est de porter cette offre à maturité.

Objectifs

Dans le cadre du stage, l’étudiant participera à l’architecture et au déploiement des différents composants de la plateforme en prenant en compte les impératifs de sécurité, de tolérance aux pannes et de performances. Pour assurer l’exploitation de la plateforme, il mettra en place des chaînes de traitement en streaming pour collecter, traiter, afficher et alerter à partir des évènements émis par le système.

Technologies à disposition

Un laptop avec les caractéristiques suivantes :

• 32GB RAM
• 1TB SSD
• 8c/16t CPU

Un cluster composé de :

• 3x 28c/56t Intel Xeon Scalable Gold 6132
• 3x 192TB RAM DDR4 ECC 2666MHz
• 3x 14 SSD 480GB SATA Intel S4500 6Gbps

Plateformes, composants, outils

Kubernetes, Hadoop, NoSQL, Git, LXD, Kafka, Spark, Ceph, Infrastructure as Code…

Environnement

Adaltas est une équipe de consultants experts en Open Source, Big Data et systèmes distribués. Nous sommes présents en France, au Canada et au Maroc. Notre expertise Big Data a commencé dès 2009 par l’accompagnement de la société EDF et la collecte des données Linky dit compteurs intelligents. Depuis, Adaltas accompagne les grands groupes français et internationaux dans leur transition numérique et la valorisation de leurs données. Aujourd’hui, Adaltas est le partenaire privilégié de Cloudera et DataBricks, 2 des principaux éditeurs de l’écosystème Big Data.

• Lieu : Boulogne Billancourt, France
• Langues : français ou anglais
• Période : printemps-été 2020

Renseignements

Nous vous invitons a nous contacter si vous êtes intéressé ou si vous souhaitez simplement obtenir plus d’information.