至元二十三年，集賢學士程文海向元朝推薦南宋舊臣二十二人，把謝枋得排在第壹位，他推辭不赴任。第二年，行省丞相忙兀臺帶著聖旨征召他。謝枋得說：“上有唐堯、虞舜，下有巢父、許由，我謝枋得的姓名不吉祥，所以不敢奉詔前往。”福建行省參政魏天祐見當時朝廷正把尋求人才作為當務之急，想把推薦謝枋得作為功勞。等見到魏天祐，又傲慢而不行禮。魏天祐大怒，強迫他到北方去。
至元二十六年四月，謝枋得到了京師。不久就病了，遷居到憫忠寺，看見墻上的《曹娥碑》文，哭著說：“小女子尚且那樣（講孝義），我難道不如她嗎？”留夢炎派醫生拿來藥物拌進米粥讓他吃，謝枋得大怒說：“我想死，妳卻要讓我活嗎？”他把藥飯扔在地上，最終絕食而死。