同治十壹年（1872），棄官歸裏，遂不聞政事，專心致誌研治學術，校輯群書，手抄古籍無間日。曾準備訂補經籍，作《四部考》，凡百余種書。藏書有2萬余卷，藏書樓有“安越堂”、“香雪崦”，所藏書延續到1949年以後，由杭州古籍書店所收購。長於目錄之學，校書88種，如《陶庵夢憶》、《兩般秋雨軒隨筆》等，內有經書考辨，詩文，小說戲曲評論，朝野掌故，裏巷稗史，方言俗諺等內容。博采眾說，考證精到，多有創見。壹生著述宏富，晚年自訂所著為《香雪崦叢書》，有《讀經拾瀋》、《讀史拾瀋》、《平步青日記》、《霞外捃屑》、《上書房行走諸臣考略》、《司農公年譜》、《兩負堂劄記》等20余種。刊刻圖書有《易園叢書》、《樵隱昔囈》、《國朝文藪題辭》等。