尤文簡公祠坐北朝南,位于天下第二泉南側(cè)。平面呈縱向長方形,兩進三開間,遂初堂南側(cè)、北側(cè)各有一天井。祠堂由南至北依次排布大門、遂初堂、萬卷樓(兩層)。大門為圓洞門,進門北側(cè)為遂初堂,遂初堂北側(cè)為天井,天井北側(cè)為二層三開間的萬卷樓,該祠現(xiàn)作茶室用。尤文簡公祠始建于清乾隆間,咸豐十年(1860),毀于兵火。光緒二十九年(1903)由二十六世裔孫尤侗重建,當時筑室四進,計十四楹,F(xiàn)存兩進,占地158.14平方米,建筑面積187.9平方米。正廳面闊三間,額“遂初堂”,其匾為尤桐三子尤巽照重立,朱孔陽書;其下對聯(lián)為今人書清顧光旭句。堂之北,隔天井為祠樓,額“萬卷樓”,尤桐書。按:遂初堂及萬卷樓均系尤袤所建建筑名稱,當時分別在尤袤府第及墅園“樂溪居”內(nèi),此處為移用舊名,以志紀念。