De Brabantse edelman Willem van Oranje-Nassau (1533-1584) woonde samen met zijn vrouw en kinderen in het Kasteel van Breda, zijn machtsbasis. Regelmatig vertoefde hij voor zijn werk als diplomaat in zijn Paleis van Nassau op de Koudenberg in Brussel. Laatstgenoemde paleis is twee eeuwen later bijna volledig afgebroken vanwege de slechte bouwkundige staat. Tegenwoordig zijn nog enkele overblijfselen zichtbaar in de gewelven van de Koninklijke Bibliotheek van België die nu op de locatie is gevestigd.