Bereits 1785 hatte er von seinem Vater Matthew Fortescue, 2. Baron Fortescue, den Titel Baron Fortescue, of Castle Hill in the County of Devon, geerbt, der seither als nachgeordneter Titel des Earls geführt wird. Dieser war am 5. Juli 1746 an dessen Halbbruder Hugh Fortescue, 14. Baron Clinton, zusammen mit dem Titel Earl Clinton, verliehen worden, der bereits 1721 den Titel Baron Clinton geerbt hatte. Das Earldom Clinton war bei dessen Tod 1751 erloschen, die Baronie Clinton in Abeyance und später an eine andere Linie der Familie gefallen, nur die Baronie Fortescue war mit einem entsprechenden besonderen Zusatz verliehen worden, dass sie an Matthew Fortescue fiel.
Der älteste Familiensitz und heutige Wohnsitz des Earl ist Ebrington Manor in Gloucestershire. Weitere Sitze waren seit dem 15. Jahrhundert Castle Hill und Weare Giffard Hall, beide in Devon.