Инициатором основания Королевской академии художеств стал художник Антонио Мелендес, который в 1725 году посоветовал Филиппу V учредить Академию рисунка, живописи, скульптуры и архитектуры.
В музее Королевской академии художеств имени святого Фердинанда, расположенной неподалеку от квартала Соль, ныне хранится более 1400 картин, 600 скульптур и 15 тыс. рисунков, а также замечательная коллекция изделий декоративно-прикладного искусства: гобеленов, серебряных украшений, керамики, фарфора, часов, мебели и медалей.
В залах постоянной экспозиции Академии представлены шедевры испанского, итальянского и фламандского искусства. Франсиско де Гойя был ее членом с 1780 года, и в музее хранится 13 его полотен, в том числе два автопортрета, «Коррида», портреты Моратина, Хуана де Вильянуэвы и актрисы Тирана, а также сцена испанского карнавала, известная под названием «Похороны сардинки».
В здании Академии расположены музей, архив-библиотека, мастерская по производству гипсовых форм и Национальный центр гравировального искусства, в котором хранится уникальная коллекция гравюр самых известных испанских художников, среди которых медные гравюры Франсиско Гойи, выполненные в технике офорта, считающиеся шедеврами в истории мировой гравюры.