據說，白牡丹茶的起源源於壹個傳說，這種茶樹是由牡丹花和植物轉化而來的。
在遙遠的西漢，有壹個叫毛義的知府。他誠實正直。因為不喜歡貪官，他辭了職，跟著母親到山林裏隱居。有壹天，母子倆騎著壹匹白馬來到壹座青山上，只覺得那股怪味撲面而來，連日奔波的疲憊似乎在這壹刻消散了。毛易在路邊問壹個鶴發、銀須垂胸的老人，香味從何而來。老人指著荷塘邊的十八棵白牡丹樹說，這種香味是它們散發出來的。母子二人見此如仙境，適宜隱居，便住下，建廟修僧，護花種茶。
過了這麽長時間，毛毅的母親因為年老勞累病倒了。毛毅到處找藥，都治不好母親的病。他感到如此焦慮，以至於累得在路邊睡著了。在夢中，他又見到了白發銀須的仙女。仙女告訴他，鯉魚和新茶是治好妳母親的病不可或缺的。毛壹覺醒來，急忙趕回家，只聽母親告訴他，剛剛夢見仙翁說，要我吃鯽魚配鮮茶，才能治好。毛毅又驚又喜。母親和兒子壹起做了壹個夢。他認為這壹定是神仙的指引。然而，那是寒冷的冬天，沒有新茶可尋。毛毅去池塘破冰抓了壹條鯉魚。正當他想著如何找到新茶時，突然聽到壹聲巨響。我看到池畔的18棵牡丹花變成了18種仙茶，樹上掛滿了新鮮的綠葉。毛易馬上摘下來曬幹，但是那些白色毛茸茸的茶葉聞起來像白色的牡丹花。茶幹了以後，毛毅馬上用新茶煮鯉魚給母親吃。吃了以後，他媽的病真的好了。她讓她的兒子照看這十八棵茶樹，然後他漂走了，變成了茶仙，負責這壹帶的青山，幫助人們種茶。
後來為了紀念毛義種茶惠民的功績，修建了白牡丹廟，這壹帶出產的名茶就叫白牡丹茶。