Impact des architectures multiprocesseurs sur les communications dans les grappes de calcul : de l'exploration des effets NUMA au placement automatique

Abstract

Ce rapport est un mémoire de DEA. Il présente une étude des effets NUMA sur les communications sur réseaux rapides, dans des grappes de calcul. L'augmentation du parallélisme, en réponse à une demande croissante de puissance de calcul, mène à une généralisation de la distribution des bancs mémoire, créant des coûts d'accès non uniformes. Ces effets NUMA, largement étudiés dans le contexte de l'ordonnancement et du placement mémoire des threads et des données, sont connus pour avoir des effets sur les communications réseau. Ce document expose les résultats de tests de transfert de données, et de tests au niveau applicatif, qui traduisent un impact de ces effets : fort et parfois asymétrique sur le débit des communications, tandis que faible sur leur latence. Il décrit une implémentation de placement automatique dans la bibliothèque de communication NewMadeleine. Celui-ci garantit les performances de communications optimales et leur portabilité, en récupérant des informations de topologie et en plaçant les tâches de communication en fonction de celles-ci.