唐玄宗避安史之亂，幸蜀，留下“細雨微旋七曲，郎當有哀玉環之聲”的詩句，“七曲山”由此而聞名天下。
七衢山寺建於東晉。它最初被稱為“雅茲寺”。有23座元明清時期的古建築。它是南宋皇帝高宗建造的第壹座文昌宮。這座寺廟打破了中國宮殿坐北朝南的傳統，它的位置是東西向的，因為古人自古就有“紫氣東來”的說法。
大廟是海內外文昌宮的祖庭。在千余年的造神運動中，張亞子被歷朝歷代追封為“撫遠華凱文昌帝魯五祖弘忍大滿禪師”，號稱“北有孔子，南有文昌”。
七衢山寺現存元、明、清三代古建築23座，被著名建築師梁思成譽為“古建築博物館”。它宛如人間宮殿，天上宮殿，1996被列為全國重點文物保護單位。