这幢私宅占地面积4400多平方米，主体建筑中有三幢房子，每幢即是单独的建筑，前后幢又相互依靠，紧贴而建，使之相连接，串在一条轴线上纵向排列着，成为面阔三间进深11间之深。“世大夫第”古宅主体建筑坐东朝西，八字形门。紧靠着这幢建筑的北侧是由四幢古屋组成的纵向排列相串而成的房子，再北侧仍是由四幢古居串成的房子。上述共11幢房屋组合在一块，外观上就是一座特大型的房屋。

　　高门大户，就是这幢古屋的正大门的特点，主屋的正大厅由于跨度大，木架结构上采用了穿斗式与抬梁式结合，形成一个高旷的大厅堂。在靠近天井的部位还采用了卷棚式，起到扩大空间的作用，当地人称它为船棚式，大厅内使用了二十多根柱子，每根柱子下的磉礅都雕刻着精美的图案，使厅堂显得更加豪华气派。

　　古屋的雕刻细致繁缛，主要采用镂空雕和浮雕。在正大厅大门门楣上有精美的镂空高浮雕和匾额，匾额的匾文曰“爽挹西岚”，为祭红石。门楣浮雕分三层，下层是鲤鱼跳龙门，中层是状元打马逛街和麒麟图，上层是丹凤朝阳等。门楣浮雕的两侧的墙体中嵌入几块祭红石，象官帽二侧的帽翅，从整体上看这个门头上装饰就象是一顶特大的官帽。正前堂天井北侧的花窗雕刻有三国演义的故事。

　　古屋为砖木结构。屋顶部为硬山顶和半坡顶组合而形成天井。墙体为井圈式，两侧山墙建成马头式风火墙。

　　罗田“世大夫第”至今保存较好，十分壮观，这座大屋现保存有四条巷，八十个门坎，二十二个天井，六十个房间，十一个厅堂，三个过堂，每幢房屋功能齐全，有学堂、下人用房，还有祭祖堂、宴席堂等，具有典型的江南乡村建筑特色，整个建筑布局合理、构筑精美，高大气派、古朴厚重。安义世大夫第古宅为省级重点文物保护单位。