故居占地面積4463平方米，建築面積2773平方米。花崗石鋪地廣場，造型別致的趙家古井置於其間。建築群坐北朝南，外墻為青磚勾縫清水墻，古樸典雅。馬頭墻高低起伏，富有韻律。主體建築系磚木結構，平面呈長方形，東西長42米，南北寬84米，分東路四進，西路三進，***七進。除西三為三開間外，余均為五開間，面闊約20米，沿南北走向兩條中軸線規整排列，每進兩側由廂房或回廊貫通。東壹、東二進，東三、東四進，西壹、西二進之間為起采光和承接四面檐水作用的天井。古建築群西北部是982平方米的後花園，園內西側建有32米長碑廊，鑲嵌11版塊趙樸初先生書法作品碑刻。
世太史第(趙樸初故居)古建築群風格融北方古建的恢宏、粗獷及徽州古建的細膩、精致於壹體，有著濃郁的地方特色和歷史、科學、藝術價值，亦是我省保存較好、面積較大的壹組明清古建築群。
趙樸初(1907—2000)，生前任第九屆全國政協副主席，民進中央名譽主席，中國佛教協會會長。是著名的社會活動家，傑出的愛國宗教領袖，中國***產黨的親密朋友。也是享譽海內外的著名作家、詩人和書法大師。
世太史第(趙樸初故居)作為趙氏家族文化的孕育地和聚集地，是趙氏家族文物資料的研究中心、保管中心和展示中心，是紀念和緬懷趙樸初先生的優秀愛國主義教育基地。200 1年始，安慶市人民政府多方籌資1000多萬元對故居住戶進行搬遷並全面修復。
1998年5月，安徽省人民政府公布為省級重點文物保護單位。現在申報為國家級重點文物保護單位。
趙文楷(1760—1808)，字逸書，號介山，趙樸初太高祖，安慶太湖縣望天鄉人。乾隆五十二年(1787)舉人，嘉慶元年(1796)狀元，授翰林院修撰、實錄館纂修、文淵閣校理等職。為給琉球國王尚溫行冊封加冕之禮，嘉慶四年(1799)朝廷選派趙文楷為皇帝正使，持節東行，賜正壹品麟蟒服。出使琉球期間，趙文楷恪守嚴規，謝絕出使國的厚贈，深為琉球朝野稱贊，，“廉潔之聲，著於海外，舉國敬禮”。尚溫因此向嘉慶皇帝表彰趙文楷的廉潔，並為趙母撰祝壽詩，贊頌趙母教子有方。(1987年趙樸初先生出訪日本曾到琉球參觀訪問，目睹了先祖趙文楷墨跡文物)
嘉慶十三年(1808)趙文楷卒於山西雁平兵備道任上，終年48歲。
趙文楷墓 位於安慶太湖縣望天鄉茶園人形山。道光二十三年（1843），趙文楷棺柩由山西雁平遷回太湖，與妻、妾合葬。墓坐東北朝西南，墓頂用桐油、石灰夯築，呈半圓形。墓碑高五尺，寬三尺，碑正面中央鐫刻楷書“皇清誥授中憲大夫顯考趙公介山老大人之墓”，左、右首刻趙文楷妻、妾，字均清晰可見。載入《中國名勝詞典》。
趙文楷著述甚多，有《楚遊草》、《槎上存稿》、《石木臼山房詩存》、《獨秀草堂古今文》等，惜多殘失。
1998年5月，安徽省人民政府公布為省級重點文物保護單位。