宋文誌很快轉向張易之,誰屬於武則天?男寵?。他要求宋寫許多詩給武則天以取悅她。不久,張謇之、殿山郎王等人逼迫武則天退位,而自然也未能幸免。被殺後,宋將流放到羅定縣參軍。昔日的榮華富貴讓他無法承受眼前的事實,於是第二年他偷偷回到洛陽,躲在好友王的家中,也就是安定公主的丈夫。當時吳三四很強大,但是王不想大唐的江山落到吳三四手裏,就密謀殺死吳三四。
當宋知道這件事時,他命令他的侄子把這件事告訴吳三思。結果,王壹行被斬首。當然,宋也因為揭發有功而得到吳三思的賞識,被提拔為裂鴻主簿,這件事之後,宋背了很多罵名,被世人恥笑。現在有學者認為,當時的告密者其實不是宋的,而是他的弟弟宋之推。然而,在王被殺後,宋立即被提拔。因此,人們自然會認為他就是揭發王的反派了。
然而,宋文誌避難的吳三四並沒有驕傲多久。李多佐殺了他。之後投靠了太平公主。然而,太平公主與安樂公主之爭,卻以安樂公主被害而告終。宋文誌的靠山又倒了。這壹次,他被貶到了欽州。兩年後,他被李隆基授予死刑,享年56歲。