伝承では平安時代に藤原秀郷によって築かれたと云われ、戦国時代には佐野氏の支城の一つであったと考えられている。
蓬山城は大戸川と小戸川が合流する地点の北西に聳える標高390mほどの山に築かれている。かつて蓬山ログビレッジなどから登山道が整備されていたようであるが、現在は登山道は荒廃している。
主郭は山頂にあって石祠が祀られている。非常に手狭な細長い曲輪で東は堀切はなく、西側を小さな堀切で遮断している。主郭には石積が見られるが、あきらかに後世の石積である。
堀切の外側にはさらに南西側に段々と造成した曲輪群があり、その先にも小さな堀切がある。この辺りの削平が遺構なのか植林などにともなう造成なのかはっきりしない。
蓬山ログビレッジに駐車可能。かつての登山道入口は蕎麦屋の奥にあり道標は残っている。ここから谷間を進んで行くと道はなくなるので、南の尾根上までよじ登る。尾根上からはかつての登山道が残っている。