據說他隱居的地方有三個:
壹個在石鼓附近,所以傳說他經常在合江閣上的滄浪中彈琴。“瀟湘門外水如天,令人心酸。不知登高能給客,怎能如汨羅園?”朱經常把的詩唱進他的鋼琴裏;
二是南嶽山腳,相傳他的《瀟湘水雲》創作於勾樓峰的尚雲亭;
第三,衡陽威州到貴陽附近有個小山村。這裏的景觀由白河清江等支流註入湘江,河中間有許多島嶼和大陸,人跡罕至。他誤以為是瀟湘交集,而這正是瀟湘水雲中意境的來源。