城は長瀬川が江の川に合流する地点の西にあり、北側を除いた三方を長瀬川によって囲まれた要害の山頂に築かれている。
主郭は山頂にあって南北に長く、北東隅部が欠けて一段低い削平地がある。虎口のようでもあるが定かではない。主郭の南背後は堀切で西へ竪堀状に落ちている。それより南側は細尾根である。
主郭の北側にも堀切があり、その北に馬蹄形の削平地があって西下に帯曲輪がある。さらに尾根を降った所にも削平地があり、現在神社が奉られている。
ここから尾根は北西方向になり、上梶矢集落と下原集落を結んでいたと思われる峠道の切通しへと通じている。
尚、城山の北東にある浄泉坊は城主の館跡といわれる。