建於1894年（清光緒二十年）以前，原主人為官也夫人（D. Carolina Cunha）。香港富商何東爵士於1918年購入該大樓，作為夏天來澳門消暑的別墅。逝世後，其後人根據他生前的遺囑，將大樓贈予澳門政府作開設公共圖書館之用。1958年圖書館正式對外開放。