Un grand erci à Osman Aidel, de l'IN2P3 qui a prêté un cluster Spark pour mes tests.

C'était un cluster de 8 machines ayant chacune 64G de RAM et 24 coeurs. Le stockague des données se faisait sur une baie depuis laquelle les volumes étaient montés sur chaque machine.

Malheureusement, l'infra était un peu différente de celle confiée à Paul Tréhou. Je disposais d'une machine de moins, ce n'était pas la même version de Spark, d'Hadoop ou des OS. Les tests comparatifs avec l'année précédente sont donc impossible à exploiter.

Au cours de mes tests, des machines ont été perdues, ce qui a compligué l'exploitation des résultats.