Op het vroegere bolwerk Muiden verrees in 1865, in opdracht van het Ministerie van Oorlog, een nieuwe cavaleriekazerne. Vier in sobere neoclassicistische trant uitgevoerde vleugels, elk voorzien van een poort, omgeven een rechthoekige binnenplaats. Op de begane grond waren stallen voor tweehonderd paarden, terwijl op de verdieping en de zolder manschappen werden gelegerd en hooi en stro werd opgeslagen. In 1874 kwam naast de kazerne een overdekte manege met een ijzeren kapconstructie. Na de Tweede Wereldoorlog raakten de gebouwen geleidelijk in onbruik en werden deze steeds vaker benut als opslagruimtes voor het naastgelegen Rijksmagazijn van Geneesmiddelen.In de periode 1989-1992 werd het complex door architect Koen van Velsen ingrijpend verbouwd tot ‘kunstenaarsresidency’ van de Rijksakademie van beeldende kunsten.