В 1808 году Инфантадо поступил в гвардию короля Жозефа Бонапарта, но вскоре оставил её и стал призывать народ к войне против французов. В 1809 году Инфантадо командовал армейским корпусом и был два раза разбит французами.
После восстановления Бурбонов Инфантадо в качестве одного из вождей партии «сервилов» (ультрароялистов) был назначен президентом «Совета Кастилии». Торжество конституционной партии в 1820 году повлекло за собой ссылку его на Майорку.
В октябре 1825 года Инфантадо стал во главе министерства, но уже в 1826 году был вынужден подать в отставку. Был холост. После смерти герцога в 1841 году его титулы и владения унаследовал племянник — герцог Осуна.