Consultant Data Engineer, PYTHON, JAVA & SCALA – H/F

Cat-Amania

  • Paris
  • CDI
  • Temps-plein
  • Il y a 27 jours
Créée en 1999, Cat-Amania fait partie des ESN les plus compétitives dans les régions où elle est implantée et se spécialise sur des projets d'envergure orientés métiers : Banque, Assurance, Grande Distribution et Protection sociale mais aussi Energie, Industrie, Secteur Public. En 2023, Cat-Amania c'est 90,8 millions d'€ de chiffre d'affaires, 1100 collaborateurs répartis sur 15 agences en France et 6 agences à l'international : Maroc, Luxembourg, Canada et Suisse. Aujourd'hui, l'objectif est de conforter le développement de nos agences et d'ouvrir de nouveaux pays en Europe, conserver notre croissance pour atteindre 100 millions d'€ de CA en 2024.L'Agence de Paris Fort de nos référencements et présente depuis 1999 l'agence Cat-Amania Paris bénéficie d'une croissance solide et dynamique permettant d'offrir de nombreuses opportunités à nos collaborateurs. Avec plus de 200 consultants, nous avons su gagner la confiance de nos clients et la conserver grâce à l'investissement de chacun, car Cat-Amania c'est avant tout une approche humaine avec la volonté d'entretenir des liens étroits au sein de ses équipes.Le poste
  • Participer à la réalisation de projets décisionnels et au développement des processus d'intégration de Data Hub, de DataWarehouses ou Data Lakes en architecture On Premise ou Cloud & Hadoop.
  • Accompagner les Métiers dans l'expression de leurs besoins en termes de conception de flux de données et modélisation des traitements.
  • Définir et produire les dossiers de conception fonctionnelle et technique des flux de données et des traitements.
  • Définir et produire les scripts de traitements de données structurées ou NO-SQL: Data Prep, Data Quality Management, Calculs et traitements de données en mode batch et/ou real-time, interfaces exports/imports, interfaces API …
  • Définir et produire les processus d'exploitation IT des traitements de données : supervision, scheduling, sécurité, gestion des log …
  • Concevoir les protocoles de tests. Organiser et réaliser les plans de tests. Réaliser des tests unitaires et de recettes
  • Rédiger des manuels utilisateurs et former les utilisateurs
  • Développer des requêtes PYTHON et/ou JAVA et/ou SCALA
  • Être en support aux Data Analystes pour réaliser des études statistiques et des échantillons : profil et segmentation client, analyse de questionnaires …
Votre profil
  • Diplômé·e d'un cursus ingénieur en Informatique, vous justifiez d'une première expérience de plus de 3 ans dans les activités de Data Intégration, Data Ingénierie et de développement PYTHON, JAVA, SCALA
  • Vous maîtriser le framework HADOOP, SPARK
  • Vous maîtriser les outils Big Data suivants : YARN, PIG, HIVE, KAFKA ; FLINK, SPLUNK
  • Vous avez conçu, développé et déployé en production des traitements de différentes natures : Processus d'export, Processus d'import, Migration/reprise d'historique
  • Vous maîtriser les problématiques de Data Intégration dans un contexte multi-technologie : DB2, ORACLE, SQL SERVER, HDFS …
  • Vous maîtriser les problématiques de Data Intégration dans un contexte multi-technologie NOSQL : MONGODB, NEO4J, COUCHBASE, HBASE, CASSANDRA
  • Une première expérience des méthodes agiles & Devops serait un plus

Cat-Amania