贺知章秘监祠（贺秘监祠），俗称湖亭庙。相传宋绍兴十四年（公元1144年），郡守莫将在贺知章读书的故地重建“逸老堂”，以祀贺知章和李白。乾道五年（公元1169年），太守张津重修。宝庆三年（公元1227年），太守胡矩重新进行维修。

元至元年间（公元1335—1340年），逸老堂和涵虚馆合并，改设水马站，分为南北二馆，贺秘监祠被废址。至正十九年（公元1395年），浙江分省命理问邱修馆舍，得知章像於芜秽中，於是就在驿站东西的偏房作祠堂祀之。明洪武初年，南北二馆合并为一驿站，将祠堂迁至今天的位置上。清乾隆四十七年（公元1782年）建後殿。现存建筑为清同治四年（公元1865年）重修的，坐北朝南。该建筑共有三进，均为五开间。正殿门额题有“唐秘书监贺公祠”，祠内原有北宋熙宁元年（公元1068年）的《众乐亭诗刻》，其中有王安石、司马光等十五人诗二十首;南宋开庆元年（公元1259年）《重建逸老堂记》吴潜撰文，《叙唐秘监贺公知章碑》沈恺撰文，方仕集唐李邕书等碑刻。有的已迁至天一阁东园。