Tijdens de oorlog werden hier invloedrijke Nederlanders gegijzeld. De Quay zat er vast van december 1942 tot juni 1943. Hij was lid van de Heeren Zeventien, die discussieerden over de inrichting van het naoorlogse Nederland. In de toegangshal van het hoofdgebouw – inmiddels een appartementencomplex – is in 1948 een gedenksteen onthuld.