19 novembre 2015
DR17 CNRS, Rennes
Fuseau horaire Europe/Paris
Inscription close! Merci de contacter directement les organisateurs si besoin

CersatCloud: stockage et traitements massivement distribué (MooseFS et job distribués)

19 nov. 2015, 11:40
40m
Salle réunion (DR17 CNRS, Rennes)

Salle réunion

DR17 CNRS, Rennes

1, rue André et Yvonne Meynier CS 26936 35069 Rennes Cedex

Orateur

M. Frédéric PAUL (CERSAT IFREMER)

Summary

La présentation portera sur la plateforme big data & cloud que nous avons montée au Laboratoire d'Océanographie Spatiale de l'Ifremer, pour répondre aux besoins de stockage et d'analyse d'archives de données provenant de satellite océanographiques depuis plusieurs décennies. Initialement expérimentale, cette plateforme héberge aujourd'hui plusieurs petaoctets de données et est utilisée pour les travaux quotidiens des scientifiques ainsi que pour des campagnes de reprocessing massives pour les agences spatiales (ESA, CNES). Je présenterai les défis métiers que nous avons relevé ces 5 dernières années en matière de gestion des données, et les solutions techniques déployées qui s'appuient sur les concepts ou technologies du Big-Data (horizontal scalability, distributed filesystems, Hadoop, Spark...) et du Cloud (plateforme mutualisée, environnements virtuels dédiés à la demande).

Auteur principal

M. Frédéric PAUL (CERSAT IFREMER)

Documents de présentation