En 1763, il devient membre du Conseil Privé et, d'octobre 1763 à juin 1765, réussit avec succès sa mission d'ambassadeur à Paris. À l'automne 1765, il est nommé lord-lieutenant d'Irlande.
Une satiriste anonyme le décrit en 1777 comme « le pire des hommes de sa Majesté » en mettant en exergue le caractère égoïste d'Hertford.
En juillet 1793, le titre de marquis d'Hertford est créé pour lui.
Il décède à l'âge de 66 ans, le 14 juin 1794, au domicile de sa fille, la comtesse de Lincoln. Son décès est le fait d'une infection contractée à la suite d'une simple blessure lors d'une promenade à cheval. Il est enterré à Arrow, dans le comté du Warwickshire. Son fils, Francis Ingram-Seymour-Conway, lui succède comme 2e marquis de Hertford.