Тогда он вместе с Академией Изящных искусств располагался в монастыре францисканцев, а его коллекция состояла в основном из работ, принадлежавших гильдии Святого Луки (до ее распада в 1773 году). В 1841 году бывший бургомистр Антверпена Флорент ван Эртборн подарил музею свою коллекцию, состоящую из 140 работ фламандских живописцев XVIII столетий.

Это бесценное собрание и по сей день считается гордостью музея. В 1890 году собрание было перевезено в новое здание, построенное архитектором Яном Якобом Винтерсом в неоклассическом стиле. В нем музей размещается и сегодня.

Основную часть коллекции музея составляют работы фламандских, нидерландских и бельгийских художников XVIII веков. Искусство XVIII столетий представлено работами таких мастеров как Ян Ван Эйк, Рогир Ван дер Вейден, Дирк Боутс, Ганс Мемлинг. Также музей хранит шесть работ Квентина Массейса, основателя антверпенской школы живописи, включая его превосходный триптих «Оплакивание Христа».

Работы трёх прославленных мастеров XVII века из Антверпена — Рубенса, Йорданса и Ван Дейка — являются главной ценностью собрания. Коллекция произведений Питера Пауля Рубенса, включает в себя 21 картину, а также эскизы маслом, и состоит из работ, выполненных в различных жанрах в разные периоды творчества. Это одно из наиболее полных собраний работ фламандского мастера.

Музей является обладателем коллекции бельгийской живописи Нового Времени и последующих эпох, светящей из работ разных жанров, стилей и направлений. Говоря об этой коллекции, следует упомянуть имена таких известных художников как Джеймс Энсор, Рене Магритт и Поль Дельво.