Comme j'ai trouvé comment faire, je me réponds à moi-même, ça pourra servir à d'autres :
Dans Windows 8, aller dans le Panneau de configuration (déplacer la souris en bas à droite de l'écran pour faire apparaitre "Paramètres", cliquer dessus, puis Panneau de configuration, Horloge langue et région, Langue / Paramètres avancés / Changer les méthodes d'entrée/modifier les touches d'accès rapide de la barre de langue / puis cocher la case souhaitée : Pour déverrouiller les majuscules.
Voilà, c'est un labyrinthe dans lequel avec un peu de patience on se retrouve quand même.