Comme je viens de trouver la solution un peu par hasard et que je ne l'ai vue nulle part suite à mes recherches, et ceci étant le premier résultat Google à ce jour, voici la solution qui a fonctionné me concernant :
Il faut ouvrir Dell Audio, qui est en fait l'exécutable "RtkNGUI64.exe" qui devrait se trouver dans C:\Windows\System32\DriverStore\FileRepository\hdxrt.inf_amd64_b0026a592e9b4de4
Si ce fichier n'est pas présent, à voir, peut-être télécharger "Realtek HD Audio Manager" sur le site de Realtek https://www.realtek.com/en/component/zoo/category/pc-audio-codecs-high-definition-audio-codecs-softw...
Double-cliquer sur "RtkNGUI64.exe" ouvre donc "Dell Audio", aller dans l'onglet "Avancé" puis "Information de prise", puis cliquer sur la prise noire (espèce de bouton noir rond), ça ouvre une fenêtre "Quel périphérique avez-vous branché", choisir "Casque (avec microphone)" (chez moi c'était "Casque").


Voilà une manipulation étonnamment compliquée pour une problème aussi simple !
Nb : la fonction "Activer la fenêtre de dialogue automatique lorsqu'un appareil a été branché" ne fonctionne pas chez moi, aucune fenêtre ne s'ouvre.