La chapelle du séminaire, qui fut édifiée entre 1670 et 1688, fut construite sur un plan en forme de croix latine présente sur la rue adjacente (rue Mégevand) une somptueuse façade à deux étages de pilastrescorinthiens. À l'intérieur de l'édifice, on peut apercevoir un exemple des manifestations les plus tardives du style gothique en Franche-Comté, notamment au niveau de la voûte.
Ce lieu est le théâtre du livre Le Rouge et le Noir de Stendhal (là où vivait le héros du livre, Julien Sorel).