年輕時，胡璋仍然非常積極地要求官運亨通。他帶著詩作到北京等地，到處拜訪朝中權貴和地方名流，但都無果而終。
屢次碰壁也使他沈溺於酒色，在玩世不恭中過著放蕩的生活:
有壹年，我在江海中狂遊，夜宿主張上樓。
酒鬼幾次，群眾小，因為很多文章都是諷刺王公的。
當年來參觀的人大都很欣賞他的詩，其中最佩服的是我們太平軍的使者令狐楚。
令狐楚甚至親自起草奏章向朝廷推薦胡璋，說他長年生活在江湖，擅長詩詞歌賦，風格獨特。希望皇上能重用這個人才。
穆宗看到胡伶寫的信後，把胡璋的詩拿給元稹看。元稹壹聽說是令狐楚推薦的，立刻對失去了好感——因為當時正值“黨爭”時期，令狐楚屬於牛黨，元稹傾向於李黨。
穆宗問:“胡璋的這首詩是什麽？”
元稹以輕蔑的口吻說:“胡璋的這首詩只能算是小技巧。君子如何能寫得像他？”如果重用這樣的人，恐怕會對陛下的風俗和教育造成不良影響。"
唐穆宗非常相信元稹，他當然不會給胡璋機會。
通往官職的入口被堵住了，胡璋不得不懊惱地離開首都。
他在揚州定居。
遊山玩水，遊覽城市，沈醉於美酒和詩歌，盡情玩樂，胡璋以另壹種方式找到了內心的滿足。
他深深地愛上了揚州，並寫下了壹首名為《漫遊淮南》的詩:
十裏長街四通八達，月明橋上可以看到神仙。
生只與揚州死不謀而合，禪智山野照墓場。
胡璋性格中有俠義的壹面。他和俠客崔涯是好朋友。有壹天，他們去拜訪沈李，節度使在淮南。
在沈李面前，胡璋自稱是“漁夫”。沈李覺得他很與眾不同，於是問道:“妳用什麽來釣鰲？”胡璋回答說:“用彩虹。”“那魚鉤應該用什麽？”“用半月板。”“誘餌在哪裏？”“就用妳的矮個子李相公做誘餌。”
胡璋的回答讓沈李覺得很有氣勢，他的想象力大膽非凡，於是送給他很多禮物。
在詩歌創作中，胡璋似乎更願意關註那些女性。在那些詩裏，寄托了他對弱者的同情，對不公平命運的抗爭，對黑暗的鞭撻，對強者的嘲諷。
他用《宮詞》①來表達他對那些被幽禁多年的宮女的“對君主的恨”:
壹位宮女在離家壹千英裏的地方住了二十年。
何滿子，看她怎麽努力忍住眼淚。
他用“蒲哥”來表達對清純少女的愛:
拉浦過湖。
朗新在哪裏？不要占新聯的便宜。
我沒打算拔出來。問郎是否樂觀。
他用“感王哲之妓死”來哀嘆在迎送中浪費青春的藝妓:
孤獨的春風老了，舞者不唱不吹。
鴛鴦帶扔在哪裏，孔雀衫就要付出。
畫鼓不聞拍，錦靴夢落腰。
今天對自己的座位有點失望，曾經在全班同學面前是壹個徹底的老師。
他用《太真香囊》描述了唐玄宗與楊貴妃的戀情:
金公主的小花囊，消耗著胸前的老香。
誰為大王久別重逢，終生怨是心。
他還用《紀靈臺》(第二部)揭露了郭夫人與的曖昧關系:
郭夫人謝過老爺，騎馬進了宮門。
但我不喜歡粉的顏色，眉毛朝至尊掃。
郭太太是楊玉環的三姐。她雖然不是玄宗的妃子，卻能“承主之恩”，因為她與皇帝有著特殊的關系。有了這個，她就可以直接騎馬進入皇宮的禁地。並且認為美貌無與倫比，就簡化妝容，敢於面對皇帝。
“輕掃切片”是壹種自信，也是壹種刻意討好的騷方式！
難怪大詩人杜牧寫詩非常誇張:
壹切感覺都沒有自由，號角之聲獨自從夕陽塔升起。
碧山終日思之不盡，草止而恨之。
纖毛看不到眼前，道除了身體，什麽都不能要求。
誰似公子，千詩輕萬戶侯。
會昌年間，杜牧被任命為池州刺史，胡璋專程去看望他。杜牧在他的和平詩中贊頌了胡璋，並對他的命運表示了深切的同情:
七子論詩難公？必須由曹流來指揮。
規模薦過去，也沒有人會被蒯通當討飯火。
北極塔掛夢，西江波濤吞走。
可憐的《離家千裏》，白唱了。
"離家千裏，知者只當是杜."晚唐詩人鄭谷說，壹點也不誇張。
胡璋還喜歡參觀佛教寺廟，杭州的靈隱寺和天柱寺，蘇州的靈巖寺和冷嘎寺，常州的惠山寺和山泉寺，鎮江的堪羅寺和趙胤寺，到處都留下了他的足跡。他為這些寺廟寫詩，並與僧侶有許多接觸。
在與佛教和禪宗的接觸中，胡璋可能想找到生存的智慧，以獲得內心的平靜。他寫了壹首詩，名為《致寧大師題詞》:
悟身不染，空之物不生。
如果妳笑的時間長了，妳會感覺好幾年。
林箐被月亮和孤獨的雲海覆蓋著。
我願在塵埃之外訂立契約，壹得便智明。
支竹控制了局面。誰不想這樣呢？
晚年，胡璋隱居在丹陽曲阿，最後死在那裏，也實現了他“生只遇揚州死”的願望。