中世佐野氏の居城で関東七名城のひとつといわれている。唐沢山山頂を主郭として一体に郭を配しており、広大な城域を有している。山頂部の本丸跡には唐沢山神社が鎮座し、周辺には関東では数少ない織豊期の高石垣があり、度重なる上杉謙信からの攻撃を退けた難攻不落の山城であったことをしのばせる。また山腹には中世山城期の曲輪や堀切、山麓には大規模な堀や土塁を伴う複数の屋敷跡が見つかっている。