《晉書·潘嶽傳》中記載“嶽性輕躁，趨世利，與石崇等諂事賈謐，每候其出，與崇輒望塵而拜。”翻譯過來就是，潘嶽性格浮躁，趨於勢力，與石崇等諂事賈謐，總是等到賈謐出門，看到飛起的塵土就開始下拜。
潘楊之好
潘嶽在政治和為官方面也頗有建樹，而其對妻子楊氏的忠壹和深情，他和妻子楊氏12歲訂婚，相愛終身。楊氏在潘嶽32歲時逝世，他為她寫的悼亡詞情誼真摯，纏綿無盡，並未再娶。更成為千古佳話，有“潘楊之好”的評價。
白發悲秋
講的就是在潘安30歲出頭的時候，由於他在官場沈浮，仕途不順，因此受到思緒的擾亂使得滿頭烏黑的秀發突然間添上了幾縷白發，那個時節正是令人感傷的秋天，他就假借古人宋玉與賈誼悲秋的故事作了壹首《秋興賦》，也正是因此有了“潘鬢”這個名稱，專門用來指代人到中年兩邊的鬢發剛剛開始泛白。唐朝時期，有壹個李德裕就寫了壹首詩，其中有壹句“潘鬢入秋悲”就用到了這個典故，而明朝時期也有壹首詩《石榴花·題情》也提到了“謾贏得潘鬢沈腰”。