徐氏四门楼宗祠，初建于清道光癸未年(1823-1826）完成。由上屋、旧屋(德星庄)、四门楼三个湾(即省五公后世子孙)合建。
宗祠占地面积780平方米，另有余屋106平方米，三脊连四进。内有大小三十六根柱，每根柱子落地处有一米多高的石脚。后进是设供奉祖宗牌位的雕龙塑凤神龛，神龛前有两个对排四方天井，靠墙处设有钟鼓楼。再往前是鼓皮屏风(即上中进隔层)。中进下面是有115.5平方米的露天阅台，阅台两边有上下走廊。前进是古阅楼(戏台)。大门门楼结构复杂而巧妙，翘角飞檐。最高脊上，双龙观塔，造型古朴。这种独具风格的古代建筑形态，在鄂东东南地区已十分少见。
宗祠始建时共36 户，按每户五人计算，不足200人，主要倡建者良台公。当时经济条件落后，建造一栋偌大的祠宇非常不易。除五谷棉麻外，无其它经济收入。据老一辈说，整个祠堂构造，除砌石工外，瓦砖都由自己加工，其木料及木工、石工的工资等是按各户人丁捐派， 以当时中等户为准，几乎是每个家庭的两年收入。
光绪己亥年（1899），因后进失火，损失巨大。上屋廷堂公，追思先祖恩德，凝聚阖族宗亲，从江西带回两大排杉树，通过长江进入海口湖抵岸，对祠堂进行完修，所有经费有廷堂公一家承担。1944年以维宏老宗长为首进行第次三修缮，耗时一年，费用颇大。
解放后，祠堂被改建为和平公社，先后办了苎麻加工厂、粮仓小学等。特别在“文革”破四旧的时候，祠堂破坏严重，许多珍贵文物遭到损毁丢失， 如楼上镂雕各式花纹云板和贤儒、寿考、孝节妇等匾额共十几块损失殆尽。
古祠堂正面眺望，屋脊上有一座五层的宝塔，宝塔两侧则是两条青龙，古祠堂前两侧为滚龙脊，脊上有数条天狗向天眺望，故称天狗望月，滚龙脊两端的飞檐为龙尾造型。入祠堂内，古戏台、古亭台上均是龙凤、人物、花卉等精美的木雕，其人物走兽形象生动， 维妙维肖，花卉动物， 件件栩栩如生。雕刻技巧高超，刀法工整，层次分明，疏密有致。整个建筑面积约1000多平方米， 规模宏大，气势不凡。