A ház híres vendége volt Patrick Leigh Fermor brit író, aki 1934-ben gyalogosan keresztülvágott Európán, majd évtizedekkel később megírta ifjúkori utazását. Az épületben Raoul Wallenberg, valamint titkárnője, a görög származású grófnő, Nákó Erzsébet és a háztulajdonos Berg-család jóvoltából sok zsidó üldözött is menedékre talált a vészkorszak idején, amit emléktábla jelez az arra járóknak.