祁阳文昌塔位于祁阳县城东南隅,矗立在“万卷书崖”之上,亦正是湘江转折之处,风水甚佳。据说古时的地貌,从远处看这里的石壁岩层仿若书册,故有“万卷书岩”之美称。
明嘉靖年间,曾任铜仁知府的邓球解职回乡,倡建塔于此镇之,以使文风不泄,让祁阳之地多出人才。然而此地却并非无主,邓球一时搞定不了产权问题,还是靠后来湖广巡按朱琏过境时出钱出面,才得以破土动工。文昌塔竣工于万历十六年(1588年),其中奉祀文昌帝君,原应并非佛塔,两年后,文昌书院亦落成,此遂成祁阳又一文气汇聚之地。
祁阳文昌塔为砖石结构的迷宫式建筑,平面八角,外观七层,内实六层,高36.68米,基座直径18.2米,每边长7米,底层以青石为基,二层以上为青砖砌筑,从下而上,逐层内收,内为拱顶。各层高度不等,各设四真四假共八门,门楣及各处神龛均有精细浮雕。石阶回环曲折,全塔有巷26条,死巷1条,通门51条,假门2条,结构精巧,沿石阶环绕至塔顶。塔顶有宝葫芦,用铁铸成,重约11吨。初游者,常常迷路而不知上下。其造型卓异,设计精良,结构奇巧,用材考究,是古建筑中精美绝伦的杰作,体现古代劳动人民智慧结晶,集地质学、建筑学、美学及民俗、宗教于一体,具有较高的科学、历史、艺术价值。先后于1996年被载入同济大学编辑出版的《中国名塔》一书,2001年4月入载湖南科技出版社出版的《湖南名胜词典》。