宋文誌很快轉向張易之，誰屬於武則天？男寵？。他要求宋寫許多詩給武則天以取悅她。不久，張謇之、殿山郎王等人逼迫武則天退位，而自然也未能幸免。被殺後，宋將流放到羅定縣參軍。昔日的榮華富貴讓他無法承受眼前的事實，於是第二年他偷偷回到洛陽，躲在好友王的家中，也就是安定公主的丈夫。當時吳三四很強大，但是王不想大唐的江山落到吳三四手裏，就密謀殺死吳三四。
當宋知道這件事時，他命令他的侄子把這件事告訴吳三思。結果，王壹行被斬首。當然，宋也因為揭發有功而得到吳三思的賞識，被提拔為裂鴻主簿，這件事之後，宋背了很多罵名，被世人恥笑。現在有學者認為，當時的告密者其實不是宋的，而是他的弟弟宋之推。然而，在王被殺後，宋立即被提拔。因此，人們自然會認為他就是揭發王的反派了。
然而，宋文誌避難的吳三四並沒有驕傲多久。李多佐殺了他。之後投靠了太平公主。然而，太平公主與安樂公主之爭，卻以安樂公主被害而告終。宋文誌的靠山又倒了。這壹次，他被貶到了欽州。兩年後，他被李隆基授予死刑，享年56歲。