詩句出自劉禹錫的《烏衣巷》，東晉時期烏衣巷曾住著當時的名門望族王、謝兩家，但是當劉禹錫前去憑吊時，王謝兩家已經沒落，當年在他們大宅檐下築巢的燕子也遷入了普通百姓的家裏。所以此兩句詩的含義正好符合謎面：小燕不喜豪門住。