『芸藩通志』には「柏原城 麦谷 下二村の間にあり、一に平家城とよぶ、上総五郎兵衛忠光が裔、市川周防兄弟、居守せしといぬ、」とある。
地元には平家にまつわる伝承が残る。
平家城は水内川が大きく蛇行する地点に細長く伸びた丘陵に築かれていたという。
『広島県中世城館遺跡総合調査報告書』には細長く伸びた約200mの丘陵全体を利用した城としているが、山上は細尾根の自然地形に近い尾根で明確な城郭遺構は確認できなかった。堀切のようになっている部分は旧街道の切通である。
車は上五原公民館に駐めさせていただいた。 公民館の南側にある工場へ続く道を進んで行くと切通の山道に至る。この付近から登りやすいところを登って行けば山上に至る。