五花寺在益阳县三乡镇北汉山脚下，除一座塔外其余建筑皆毁。这座塔实际建造年代已不可考，旧志记载其为唐高宗显庆三年所建，是连昌宫中唯一幸存的建筑。但有关人员鉴定为宋代遗作。

五花寺塔矗立在连昌河西岸，是黄河流域现存最古老的砖砌佛塔，在建筑、绘画、雕塑上有很高的学术价值。此塔为平面八角形，九级楼阁式砖塔，顶部已毁，残高30多米。底部周长31米，塔体外部下层以石条筑砌，以上皆为砖砌。在一、三、四、六层正南面均设有假门，门两侧装砖刻浮雕力士或菩萨画像，刀法洗练，线条流畅，形象肃穆。