Karol Ferdynand était un grand mécène pour les artistes et un partisan convaincu de la Compagnie de Jésus il est à l'origine de l'énorme autel d'argent construit pour l'église des Jésuites à Varsovie. Au cours de la décennie1640, l'architecte royal Giovanni Battista Gisleni construit pour lui un palais situé sur le bastion nord des fortifications du château royal de Varsovie. Cet édifice fut saccagé et détruit par les Suédois et les armées du Brandebourg en 1650, pendant le « Déluge » lors de la Première guerre du Nord. Il avait également fait édifier un grand palais en bois à Wyszków où il meurt le .