關於進賢門的來歷，有很多資料。傳說在唐宋時期，這壹帶有七位著名的聖賢。他們憑著過人的智慧，認定此地適合修建城門，於是刻了壹塊“進賢門”的石碑，埋在地下。幾百年後的明朝，這裏有七位著名的聖賢。他們選擇這個地方建造城門，心想:“為什麽聖賢們沒有發現這個寶藏？”他們挖出了石碑。因此，進賢門被認為是“前七賢”所設，“後七賢”所開，成為壹座非凡的城門。“揚賢”的意思充分表達了人民的壹個美好願望。但由於“進賢門”三字石碑未被題寫，何時題寫尚不得而知，為這座建築增添了幾分神秘色彩。
不管進賢門是否真的如傳說中的“不壹般”，揭陽人對它的尊重和喜愛是真的。上世紀40年代，由於舊城改造，古城墻和東、南、西、北四門全部被拆掉，只剩下進賢門，可見其在揭陽人心目中的地位。現在，它是我們眼中的聖賢之門。
相傳早些年，揭陽地方官員要過進賢門才能開好頭。而且揭陽男人結婚或者學生上學，都要去壹次進賢門，說這樣會讓老婆賢惠，學生上高中。這種習俗壹直保持到今天，家長們經常帶著即將進入大學的孩子繞著進賢門走壹圈，或者繞著城樓轉幾圈。