Des données au BigData: exploitez le stockage distribué !

12 déc. 2016, 12:00 → 16 déc. 2016, 14:00 Europe/Paris

Complexe d'accueil de Gif-sur-Yvette (DR4)

Franck CHARRON (CNRS), Maël VILLENEUVE (CNRS), Pierre ROLLAND (CNRS), Richard RANDRIATOAMANANA (CNRS), Romaric DAVID (Université de Strasbourg), Tristan LE TOULLEC (LPO)

Fiche programme (objectifs et pré-requis) programme_anf_stockage_distribue.pdf

Plan d'accès au campus http://www.dr4.cnrs.fr/delegation/images/plans/plan_campus_Gif.pdf

lun. 12 décembre

12:00 Buffet d'accueil des participants

1 Intervention RESINFO

Orateur: Sophie Nicoud (CNRS LIRMM)

Slides 01_-_Resinfo_-_Sophie_NICOUD.pdf

2 Introduction sur l'ANF

Orateurs: M. Pierre ROLLAND (CNRS), M. Romaric DAVID (Université de Strasbourg)

notes README_requirements

Slides 02_-_Accueil_-_Pierre_ROLLAND.pdf

3 Rappels théoriques concernant les architectures de stockage traditionnel

• architecture des solutions de stockage traditionnel ; • tolérance aux pannes (méthodes disponibles pour réactivité, identification, analyse proactive, etc.); • outils de monitoring ; • limites → pourquoi évoluer vers le distribué ?

Orateur: M. Sylvain Maurin (UMR5229 ISC MJ)

Slides 03_-_Stockage_traditionnel_-_Sylvain_MAURIN.pdf

4 Rappels théoriques concernant le stockage distribué

Orateur: Dr Benoît Parrein (IRCCyN UMR6597)

Slides 04_-_Stockage_distribue_-_Benoit_PARREIN.pdf

5 Programme de la semaine, horaires, informations logistiques, hébergement

18:00 Temps libre

19:00 Dîner

mar. 13 décembre

Retours d'expérience et théorie 1/2

Président de session: DELAVENNAT

6 Retour d'expérience et cours / techno ActiveCircle

Orateur: M. Jean-Luc BELLON

Slides 05_-_Active_Circle_-_Datasheet_-_Jean-Luc_BELLON.pdf 05_-_Active_Circle_-_Soleil_-_Jean-Luc_BELLON.pdf

7 Retour d'expérience / techno OpenIO

Orateur: Guillaume Delaporte (OpenIO)

Slides openio - Guillaume DELAPORTE.pdf

8 Retour d'expérience et cours / techno RozoFS, puis infinit.sh

Orateur: M. David DELAVENNAT

Transparents 06 - rozofs - David DELAVENNAT.pdf 07 - infinit - David DELAVENNAT.pdf.pdf

10:45 Pause Café

Retours d'expérience et théorie 2/2

Président de session: M. Tristan Le Toullec (LPO)

9 Retour d'expérience et cours / techno Scality (Visio)

Orateur: M. Alexandre SALVAT

Slides 08_-_scality_-_Alexandre_SALVAT.pdf

10 Retour d'expérience et cours / techno iRODS

Orateur: M. Bruno BZEZNIK

Slides 09_-_irods_-_Bruno_BZEZNIK.pdf

12:00 Déjeuner de travail

Introduction à BeeGFS

Président de session: M. Romaric DAVID (Université de Strasbourg)

11 Introduction à BeeGFS (1ère partie)

Orateur: M. Bernd LIETZOW (ITWM Fraunhofer)

Transparents ANF_Introduction_to_BeeGFS.pdf

15:30 Pause

12 Introduction à BeeGFS (2nde partie)

Orateur: M. Philippe DOS SANTOS

Slides feedback_on_beegfs.pdf

13 Préparation des groupes pour le mercredi (3 groupes)

14 Préparation des VMS pour les TP du mercredi et jeudi

17:30 Temps libre

19:00 Dîner

mer. 14 décembre

Ceph

Président de session: M. Pierre ROLLAND (CNRS)

15 Ceph: Introduction

Orateur: M. Yann Dupont (DSIN Université de Nantes)

Slides ceph - Yann DUPONT.pdf

16 Ceph: TP

Orateur: M. Yann Dupont (DSIN Université de Nantes)

Transparents YD-ANF-CNRS-2016-TPb.pdf

12:15 Déjeuner de travail

BeeGFS

Président de session: M. Romaric DAVID (Université de Strasbourg)

17 BeeGFS: Introduction

Orateur: M. Philippe Dos Santos

Slides ANF_Feedback_on_BeeGFS.pdf Typical_Administrative_Tasks_last.pdf

18 BeeGFS: TP

Orateurs: M. Bruno Bzeznik, M. Philippe Dos Santos

Slides ANF_Hand__on_BeeGFS.pdf tp_beegfs.zip

19 Bilan journée TP

17:30 Temps libre

19:00 Dîner

jeu. 15 décembre

GlusterFS

Président de session: M. Maël Villeneuve (CNRS)

20 GlusterFS: Introduction

Orateurs: M. Emmanuel Quemener, M. Pierre-Emmanuel GUERIN (GeM - ECN)

Transparents ANF_GlusterFS.pdf

21 GlusterFS: TP

Orateurs: M. Emmanuel Quemener, M. Pierre-Emmanuel GUERIN (GeM - ECN)

Transparents http://www.cbp.ens-lyon.fr/doku.php?id=formation:anfbigdata

12:15 Déjeuner de travail

22 Interactions avec les Framework de type map-reduce (Hadoop, Spark)

Orateur: M. Tristan LE TOULLEC

Slides mapreduce_-_Tristan_LE_TOULLEC.pdf

23 Collecte d’indicateurs de performances

PoC, comparer différents systèmes / technologies, pb de performances, goulots d'étranglements, optimisations

Orateur: M. Denis PUGNERE (IPNL IN2P3)

Transparents

• anf-stockage-distribue-analyse-performance.pdf
• anf-stockage-distribue-presentation-besoins.pdf
• anf-stockage-distribue-tests-wa105.pdf

Bilan journée TP

17:45 Temps libre

19:00 Dîner

ven. 16 décembre

24 Echanges autour des projets personnels

Orateur: M. Pierre ROLLAND (CNRS)

10:15 Pause Café

25 Bilan et création des outils d'aide à la décision (outils / besoins)

Orateur: M. Denis PUGNERE (CNRS / IN2P3 / IPNL)

Transparents anf-stockage-distribue-choix-systeme-stockage.pdf

26 Table ronde / échanges / Clôture

12:00 Buffet de Clôture