Raymond Bérenger, mentionné au début du XIe siècle, reçoit de Gausfred II "divers gages et garants pour une portion de la ville de Torelles et pour le château de Canet".
Raymond de Canet, mort vers 1350 sans postérité masculine. Sa sœur Esclarmonde (morte vers 1357) épouse Pierre Ier de Fenouillet (mort vers 1315), vicomte d'Ille.
Pierre II de Fenouillet, mort vers 1353. Il hérite de son cousin Raymond de Canet et devient alors vicomte d'Ille et de Canet.
Françoise, détentrice du titre et veuve de Christophe Fernandez, duc d'Hijar, s'enfuit en Espagne à la suite de l'invasion du Roussillon par Louis XIV en 1641.
Deuxième période française
Une charte d'avril 1649, accordée par Louis XIV, attribue la vicomté de Canet à Joseph Fontanella, sympathisant catalan de la cause française. Il est également nommé Régent de la Chancellerie de Catalogne, Roussillon et Cerdagne. Il meurt en 1680.
Louis XIV dispose alors de la vicomté durant tout son règne.
En 1730, un arrêt du conseil d'État rend les vicomtés de Canet et d'Évol à Isidore Fernandez, duc d'Hijar.
En 1742, le duc d'Hijar vend la vicomté de Canet à Pierre de Lazerme (après 1670-1760), bourgeois de Perpignan.