Fondé par le chanoine de la Collégiale Saint-Pierre, détruit puis reconstruit au 13ème siècle grâce à Jeanne de Flandres, l'hôpital Saint Sauveur fut d'abord un asile de quelques lits pour les malades pauvres.
Il est agrandi au17ème siècle avec la construction de la salle Saint Louis, et devient l'hôpital le plus actif de la ville au 18ème siècle.
Il ferme au milieu du 20ème siècle avec la construction de la Cité Hospitalière et le transfert des services vers ce nouveau complexe hospitalier.
Après la destruction de la majorité des bâtiments en 1960, seul subsiste aujourd'hui le pavillon Saint-Sauveur, bâtiment en brique et en pierre à trois niveaux, constitué au rez-de-chaussée par une galerie voûtée donnant sur la cour d'honneur par six arcades.

La façade et la galerie voûtée du pavillon Saint-Sauveur sont classées Monuments Historiques (décret du 23 août 1923). L'ensemble des façades et des couvertures, hormis les parties classées, est inscrit à l'inventaire supplémentaire (arrêté du 14 février 1962).