饶汉祥故居大门正南方向，面对长江，上下三层，占地面积估计不足百平方米，外形呈不规则的正方形。一楼的大门是长方形的，看上去与我国民宅的建筑风格相似，只是大门左右两边各有一根水泥圆形立柱，俗称罗马柱，立柱的顶端向外延伸，略呈喇叭形状，显得很有气派。大门之上的二楼阳台，有一拱形圆门从里屋通往阳台，阳台的围栏是规则花纹水泥预制件嵌入期间。圆门的两侧的外墙各有一块约二平方米大的长方形水泥衬面，阳台围栏左右各均匀分布四块边长约为0.7米正文形的水泥衬面。这些水泥衬面，据说是文化大革命时期为人所加，并在上面写上毛主席语录与标语。三楼阳台的围栏为灰砖垒砌，为一露天阳台，不很起眼。一楼方门左右圆形水泥柱，顶托着二楼阳台，二楼的圆门又托举着三楼的阳台，此一方一圆浑然一体，正好符合我国民俗中的天圆地方之说。大门左边为三层正圆形墙面建筑，用灰砖从底部一直彻到顶，外形如东面沿海华侨所建的碉楼，右边为两层半正圆形墙面建筑，此两圆形墙面建筑顶部均呈尖状，左高右低，相映成趣，寓意我国风水说中的“左青龙、右白虎”。 房子的顶层除了大门左边的圆形房间与中间部分是三层外，其余的都是两层，项部呈不同几何图形盖着黄色的机瓦。从建筑学来说，圆形墙体的稳定性优于平面形墙体。故居应用圆形墙体建筑非常精当，每一面墙都有圆形墙体，除东面墙的圆形墙体位于靠南一角，其余均分布于墙体的中间部分，如此形成合力，很好地加固了这河滩沙土之上的建筑物。东面圆形墙体的位置正好与南面墙体大门右边的圆形墙体形成对称，而东面墙体北角做成60度角形墙，如此形成该墙面外形的南北相对的协调，彼此呼应。如此让故居四周墙体圆形、方形错落有致，加之墙璧上线条优美的拱形圆顶门、窗上檐，精雕细刻的外伸砖刻，着实构成了一幅幅美妙的立体画卷。

故居东南西北四个方向都开有供人出入的门道。顺着正门进入，迎面是一乘木制楼梯紧靠左墙通向二楼；进大门两边分前后有四间房子，除了左边后房房门是从故居的西门进入外，其余三间均开有房门，只是右边后房房门得沿着走道向里走数步，然后转90°才能看到，并且此门同时通向故居的东门；隔着后房墙壁的北面，并排分布有二间房子，其房门均开自故居的北面。顺着一楼的楼梯进入二楼，站在二楼阳台上，可以眺望涛涛不绝的扬子江与江对面的将军山。二楼的房间分布情况与一楼相同，只是房门的位置有别，二楼除外墙是灰砖外，内墙大部分是双层木条上抹石灰砂浆而成，隔声保温性能良好，地面统一为木地板，只是北面的房子承重行条大部分坍塌。通向三楼的楼梯与二楼的楼梯挨着，三楼有三间房子，中间二间里外隔道门相通，东面的房间为一圆形，周围墙壁青砖砌成，很坚固，象碉堡。站在三楼阳台上，不仅扬子江与将军山尽收眼底，还可早上迎日出，晚上送日落，上面还有一块平台，放得下一张麻将桌，也可放张竹床；可以想像当年春秋气候宜人之际，饶先生邀来亲朋好友，或商讨天下事，或娱乐休闲，那么惬意；亦可在盛夏之夜，登高纳凉、观赏风景。故居个性十分明显：一是整个建筑非常简捷实用，既没有看到雕梁画栋的装潢，也没有发现供奉神灵之类物件，更没有发现烟室赌厅之类的痕迹。二是比较我国传统的民居有所不同，进入大门将传统宽大明亮的堂屋变为井然有序的住房，最大限度地利用有效建筑面积。三是房间窗户设计十分合理，自然采光充分，空气流通良好。想想在那个时代，熟读四书五经之人，故居的建筑风格如此新潮，让人钦佩。