詳細不明。高部城の出城とされる。
高部向館は高部城から緒川を挟んだ南側にあり、北へ伸びた尾根に築かれている。
主郭は北端に三峯神社を祀った南北に長い曲輪で、そこから西側に多段に広い段曲輪を連ねている。東は深い谷が入った急坂となっている。
主郭の南端にはL字の土塁があり、そこから南へ続く細尾根に四条の堀切を設けている。特に主郭側の堀切は大きく西へ向かって竪堀が長く伸びている。
高部城の登口に 案内板が設置されており駐車場にもなっている。
高部向館の登口は川沿いに少し南下した所に標柱があり、そこから谷沿いの道を進むと鳥居があり、ここから登る。
最寄り駅(直線距離)