Il témoigne de la présence du manoir épiscopal à cet endroit avant la Révolution. Par souci de Rénovation urbaine du centre ville, le maire Henri Servain fit abattre, en 1931, l’ancien Palais épiscopal auquel s’accotait le pavillon. Ce dernier fut acquis par la Ville en 1966 et classé à l’inventaire des monuments historiques en 1970.

Le jardin attenant est intimiste et constitue un havre de paix au cœur de la ville. Agrémenté de bancs et de hauts murs le lieu jouit d’un calme bienvenu en cœur de ville. Ici on peut s’installer sur les pelouses ou prendre le soleil à l’abri des grands arbres quelques instants.

Lors du festival Art Rock, celui-ci est investit pour se transformer en carré VIP, à deux pas de la scène du festival.