Entouré de larges fossés, taillés dans le roc au nord et à l'ouest, le château occupait une plate-forme
rectangulaire cantonnée de trois tours rondes et d'une tour carrée à l'est. Des bâtiments entouraient sur trois côtés la cour centrale limitée à l'ouest par une courtine percée d'un portail qu'un pont-levis reliait à la basse-cour fortifiée. Il en subsiste, isolée, la tour de l'angle ouest et, à l'est, entre la tour carrée et une tour ronde, le corps de logis principal et une courte aile en retour d'équerre qui sont éclairés par des fenêtres à meneaux et possèdent de belles cheminées à vastes manteaux moulurés. Un chemin de ronde règne dans l'épaisseur des murs, à la base des toits.
↑Une inscription visible dans l'église révèle qu’en 1504 Jean de Lugny, fils de Claude de Lugny, en fondant des services dans la chapelle de cette église bâtie par son père, déclara « maintenir les services et fondations faites par feu messire Claude de Lugny, en son vivant seigneur de Ruffey ». Source : Martine Petrini-Poli, Restauration de l'église romane Saint-Julien de Sennecey-le-Grand (2004-2022), revue « Images de Saône-et-Loire » no 213 (), pages 2 à 5.
Bibliographie
Histoire du canton de Sennecey-le-Grand, de L. NIEPCE (1903)
Excursions à Sennecey-le-Grand et Tournus, de J. VIREY (1909)