Tout est parti du constat que le patrimoine historique, culturel et architectural de Cassel pendant la Révolution et l'Empire était largement méconnu, alors que la ville abrite un témoignage emblématique de cette époque : le château du général Vandamme.
Le Cercle Impérial de Flandre a donc vu le jour, en étendant ses centres d'intérêt à l'ensemble de la Flandre depuis la Révolution jusqu'au Second Empire.