築城年代は定かではない。 豊後大神氏の一族緒方三郎惟栄の館跡とされる。 寿永2年(1183年)平重盛没後大宰府に逃れた平氏を、源頼朝の命により大軍をもって攻めこれを追い出し、この後平氏は壇ノ浦合戦に敗れ滅亡した。
元暦元年(1184年)惟栄は宇佐宮を焼き払う暴挙に出て流刑となった。しかし、平氏討伐の功によって文治元年(1185年)これを許された。
源頼朝と源義経が不仲となり、義経は九州へ退くこととなり、惟栄は義経を迎えに大物浦に出向くが、大風により船団は壊滅、義経と惟栄は捕えられ、惟栄は上野国沼田荘に配流となったという。

国道502号線沿いの空き地に堂々とした碑が建っている。

最寄り駅(直線距離)
1.3km 緒方駅
4.8km 朝地駅
5.7km 豊後清川駅
6.8km 豊後竹田駅
8.5km 玉来駅

付近の城(直線距離)
1.2km 豊後 高尾城
2.2km 豊後 志賀城
2.7km 豊後 鶴ヶ城
2.8km 豊後 柏野城
3.1km 豊後 腰ヶ城
3.5km 豊後 荒平城
4.2km 豊後 志賀氏館
4.6km 豊後 小牟礼城
5.2km 豊後 岡城
5.3km 豊後 小牧城
5.7km 豊後 一万田館
6.4km 豊後 加納塞
7.4km 豊後 津賀牟礼城
8.3km 豊後 田中城
8.4km 豊後 烏岳城
8.5km 豊後 騎牟礼城
8.7km 豊後 戸次氏館
8.8km 豊後 高城(小城)
8.8km 豊後 高城(大城)

2013年10月