Édifié entre 1954 et 1957 afin de doter la ville d'un centre de congrès, cet édifice abrite à l'origine une salle de spectacle modulable, dix salles de commission, un hall de réception ainsi qu'un restaurant[5]. Le palais des congrès est ensuite aménagé entre 1972 et 1975 par les architectes Marc Quentin et Michel Legrand. Une peinture murale pour la nouvelle cage d'escalier est commandée à l'artiste Nadu Marsaudon en 1977.
D'un point de vue architectural, il s'agit d'une structure cubique en béton armé, à l'architecture adoucie par le mouvement oblique d'escaliers extérieurs et par la subtile imbrication de parois convexes internes. À l'origine largement ouvert sur l'estuaire de la Gironde, il fut fermé dans les années 70 par une paroi toute en verre. À la même époque, il fut agrandi sur les jardins d'un cube transparent. Il a été inscrit au titre des monuments historiques en 2011.
Abritant les locaux de l'office du tourisme, le palais est en attente de reconversion. Le conseil municipal du a confirmé la décision de démolir le cube de verre et de réhabiliter le bâtiment d'origine pour en faire un pôle événementiel de spectacle et rencontre. Cette décision a été remise en cause depuis 2008. En 2013, le devenir du bâtiment demeure incertain[6].
En 2023, la libération du Palais est intervenue : l'office du Tourisme fait face à La Poste. La déconstruction est achevée. Le centre communal d'interprétation de l'architecture et du patrimoine occupera le niveau 0 du palais[8]. Lors de la séance du 2 mars, la municipalité de Royan vote une délibération pour demander à la Direction régionale des Affaires culturelles d'envisager un classement au titre des monuments historiques[9]. Le bâtiment rénové est inauguré le 26 juin 2023[10].