Finalement, lors du Build 2023, ceci a été annoncé.
Dans les Paramètres Windows 11 :
Personnalisation > Barre des tâches
Combiner les boutons de la barre des tâches et masquer les étiquettes
Toujours
Quand la barre des tâches est pleine
Jamais <-
Source :
Nouvelles expériences développeur dans Windows
https://build.microsoft.com/en-US/sessions/5017d756-1ed1-468c-bd43-1ac98079f71e