Cette tour constitue le dernier vestige des fortifications médiévales de la ville. Sa construction fut décidée par Philippe II de Bourgogne, comte de Flandre en 1402.
Restaurée par Vauban en 1672 après le siège de la ville, et à nouveau partie intégrante du système défensif, la Noble Tour deviendra un lieu de mémoire de la Résistance de la Seconde Guerre mondiale que le général de Gaulle inaugurera en 1959.
Elle est classée Monument historique depuis mars 1922.