Stage de Corentin Sanchez - UTBM - [4/09/17 au 8/02/18]

Important : cette page est réservée au suivi du stage, merci de ne pas la modifier

Informations générales pour les stagiaires

Pour toute information concernant ce stage : contacter André, François-Xavier

Sujet

• Proposition de stage

Stage (Septembre - février 2017)

Septembre

* 4, arrivée

Découverte Spark

Découverte Jupyter

Essai : Spark dans le notebook

Présentation de l'observatoire virtuel

Réunion Lundi 11

Hive-Bucketing-Schuffling

Octobre

Gros TP Spark : le X-Match en Python

Support question python Thomas

Plugin Jupyter Hide_Code

Modules Python

Management hdfs et colocation de blocs

Survol de l'ecosystème hadoop

Choix algo de X-match

Scale Cluster / problème de modules manquants

Novembre

Intégration Continue

Décembre

Tests A L'IN2P3

Janvier

• ...

Février

• ...

Liens

Versions testables

Documentation

Travail post stage éventuel

Liste des améliorations à envisager

Bugs connus

• Correction de mouvements dans After Effects sur l'introduction, car peu fluide