平安時代末期、源姓（げんせい）足利氏祖の源義康によって建てられた方形の居館跡（きょかんあと）で、寺院としては建久7（1196）年に足利義兼が理真（りしん）上人を開山として堀の内に持仏堂を建てたのがはじまりと言われている。四周が堀と土塁に囲まれた一辺200mあまりのほぼ正方形をしているのが特徴で、軍事的要素を持った鎌倉時代初期の武家屋敷の様相を今に伝えている。別名「大日苑（だいにちえん）」とも呼ばれ、春は桜、秋は県指定天然記念物の大イチョウの黄葉が境内を彩る。