詳細不明。堀越氏あるいは宇佐見氏の居館と考えられている。

堀越館は現在の堀越集落の南側一帯に築かれていたという。 現在は国道49号線沿いにある堀上会館の所に案内板が設置されている。

一部発掘調査が行われ、須恵器、土師器、常滑焼や信楽焼などの陶器、青磁や白磁などの遺物が出土し、建物跡や柱穴も見つかっているという。