退思园,建于清光绪十一年至十三年(公元1885-1887年),任兰生落职回乡,花十万两银子建造宅园,取名退思,“进思尽忠,退思补过”。
退思园布局独特,亭、台、楼、阁、廊、坊、桥、榭、厅、堂、房、轩一应俱全,并以池为中心,诸建筑如浮水上。内宅建有十楼十底南北两幢楼,以园主字号名为畹芗楼,是园主与家眷起居之处。楼与楼之间由“走马楼”回廊贯通,南北一式落地长窗,五楼屋底挂落栏槛,檐廊相接,典雅明敞。复廊东西两侧各设楼梯,雨天不走水路,晴天又可遮阳,又为主仆上下时避让。畹芗楼下另设下房数间,供侍者居用。