花园为浙江镇海巨贾叶澄衷之子叶贻铨（字子衡）建造。清宣统二年（1910年）江湾跑马厅建成后，叶从所获利润中筹款，建造了这座花园。园系日本人设计，布局别具一格。里面古木参天，有不少百年老树。房子曾经的主人是19世纪末上海有名的“五金大王”和“火油大王”叶澄衷。