他從小熱愛山川，喜歡看歷史類書籍，討厭八股。從歷史、地理的書籍中，他了解到祖國山川的壯美，向往大自然的美好。“我這輩子只有壹個雲山的夢”，決心去九州爬五嶽。
在母親和妻子的支持下，30多年來，徐走遍了江蘇、浙江、福建、山東、河北、北京、湖北、河南、山西、陜西、廣東、江西、湖南、廣西、貴州、雲南等地。但他道德品質很好，在任何景點、山洞都沒留下壹句話。但他在崇禎元年(1628)遊歷廣東時，在高州河邊的關山古寺墻上留下了壹段鮮為人知的精彩回文。
崇禎元年二月二十日，徐霞客離開家鄉江陰，遊歷福建、廣西。他於3月12日進入福建。福建的山、洞、谷讓徐霞客流連忘返，但9月進入廣東後，自然景觀讓他非常失望。10月2日，他來到廣東高州河邊的關山古寺朝聖。他看到長長的綠水、郁郁蔥蔥的密林、絢爛的晚霞、飛舞的沙鷗和唱晚的漁船，讓他心曠神怡，他不假思索地在寺廟的墻上寫下了壹首詩:
綠水近林，日落可回望山。
林友古寺孤明月，冷井冷湖映月臺。
海鷗到處飛，漁船到處都是，仙鶴帶著休閑亭和仙客來。
走在小道上，溪水很遠。
他的名字被題寫在這首詩的末尾。剛題完，看到我們寺的方丈深表敬意，說，施主真是個好文豪。這首詩讓寺廟豁然開朗。徐霞客壹聽，羞紅了臉。他趕緊用袖子擦了擦徐霞客二字，說:“塗鴉，塗鴉，可恥！”嘿！”這時，方丈上前扶住他的手臂，道:“施主放心。看，多麽美妙的回文詩。從頭到尾都是押韻的，讓妳覺得很開心。“反向閱讀:
打開帳篷走壹條長長的小溪，走在煙火小道上。
遊仙閣的遊客閑著鶴，泛舟垂釣飛鷗。
臺映碧湖寒井，月中孤廟清幽。
回望四山，看夕陽，林青翠綠。
對仗工整，虛實結合，尤其是“煙火”和“仙閣”，真是神來之筆。多年來壹直想為這座寺廟寫壹首詩，可惜只學了壹點點，壹直沒能如願。今天很榮幸能見到恩人。徐霞客說:“我的詩沒有我們寺廟的高雅，而是遠離自然之美，這不是我們寺廟的形象。”說完後，他用袖子擦了擦。方丈抱住徐霞客，反復勸阻，徐霞客放棄了。但提出了兩個條件:(1)擦掉徐霞客二字，避免以後被人笑話；(2)禁止寺廟告訴任何人這首詩是我寫的，方丈滿口答應。
這首回文詩和關山古寺壹樣，經歷了時代的風風雨雨，壹代又壹代的變遷，卻依然以其獨特的魅力讓遊人拍手稱快。但這首詩的作者卻成了壹個謎，鮮為人知。