Le CNRS projette d’héberger le plus grand catalogue d’objets célestes avec Dell

Depuis 2012, un partenariat lie le CNRS et la société Dell, Inc. dans le but de développer des solutions novatrices autour du traitement massif de données pour les besoins de la recherche.

Cette année, le partenariat s’est focalisé sur le projet LSST (Large Synoptic Survey Telescope) qui promet des avancées majeures dans les domaines de l’astrophysique et de la cosmologie.

Implanté au Chili, le LSST est un télescope de 8,4m de diamètre équipé d’une caméra comptant 3,2 milliard de pixels. A partir de 2022, le télescope photographiera le ciel de manière systématique durant dix ans: chaque partie du ciel sera revisitée toutes les quatre nuits, créant ainsi un film en trois dimensions de la portion d’Univers visible. L’un des objectifs de ces observations est de mesurer avec une précision inégalée les quantités physiques associées à l’énergie noire qui tend à accélérer l’expansion de l’univers.

Le traitement des données issues du LSST constitue un vrai défi puisque, chaque nuit, environ 2.000 images seront prises, soit plus de quinze téraoctets de données produits, transportés, stockés et exploités. Ces données subiront des traitements spécifiques visant à l’identification, à la classification et au catalogage automatique d’objets célestes afin de produire un jeu de données structuré, exploitable par les chercheurs. Ces traitements seront effectués dans deux centres informatiques, le Centre de calcul de l’Institut national de physique nucléaire et de physique des particules du CNRS (CC-IN2P3) en France et le National Center for SuperComputing Applications (NCSA) aux États-Unis, et reposeront sur un système de bases de données massivement distribuées.

À terme, ce sont 37 milliards d’objets astronomiques (galaxies, étoiles, astéroïdes, etc..) qui seront catalogués, soit un volume total de 500Po de données (dont 50Po indexés dans la base de données), ce qui en fait l’un des plus grands projets big data référencé. Avec le concours de Dell, la technologie associée à ces data centers est à la pointe de l’innovation et a nécessité un travail conséquent se situant à la frontière entre la R&D technique et la recherche en informatique.

Pour mener à bien ce projet, le CNRS devait disposer d’un prototype de ce que sera, à terme, le catalogue le plus complet d’objets célestes jamais réalisé. Grâce au partenariat signé entre les deux entités, c’est désormais chose faite puisque Dell vient de fournir une plateforme expérimentale équipée de 50 serveurs (soit 500To de stockage) destinée à héberger un système de base de données nommé ‘Qserv’, développé spécifiquement pour les besoins du LSST par le SLAC National Accelerator Laboratory aux États-Unis. Ce matériel permettra aux experts du CC-IN2P3 (CNRS) et du SLAC de vérifier la stabilité du système, de préparer la future plateforme d’indexation de données spécifique au LSST et de tester sa capacité à traiter l’ensemble des données.