“番仔楼”即闽南语的“洋楼”，由华侨巨富曾振源先生始建于1903年，占地面积5723平方米，建有13幢共99个房间，历时14年、耗费白银17万两。外部水陆交通便利，内有半月池、前埕院、前祠堂、中楼、后楼、后花园，自成一个周全的小世界。“番仔楼”当年由南洋设计师设计图纸，外形装饰西式风格，内在配置趋于闽南传统结构，既美观又实用。布局极为周密，所有的楼房走廊、过道相互畅通，雨天走遍全庄也不会淋到雨，既有适合族人群居的舒适特点，在采光、装饰方面，更是科学与艺术的完美结合。花砖等装饰材料由南洋专船运回，原汁原味，堪称大手笔。主厅设有取暖壁炉，后花园建有风力抽水机楼，自来水管道由此通向各座建筑——百年前闽南农村的自来水设施，确实是凤毛麟角。“番仔楼”还配有先进通畅的地下排水系统，小球不论在哪里掉落，下雨天必定能在“月池”找到。据曾氏后裔说，当时工程进入最后阶段，为了让工匠们精雕细琢，宗祠的石雕工钱是用雕凿出来的石粉称重去领取等量的白银，主人的阔绰实属罕见。
