築城年代は定かではない。文明元年(1469年)には多賀豊後守高忠が近江から侵入し東山の如意岳に陣を構えたことが知られる。
永正6年(1509年)近江に退いていた細川澄元と三好之長が軍勢を率いて如意ヶ岳に布陣したが、細川高国、大内義興の大軍に攻められ阿波へ逃走した。
如意岳城は銀閣寺の南東に聳える標高465.8mの大文字山に築かれており、現在は登山道が整備されている。
如意岳城の遺構は山頂を中心に切岸と横堀で囲繞しており、山頂の主郭、南東の二郭、北東の三郭と大きく三つの区画から成っている。
主郭は三角点のある山頂部で山頂一帯を削平し南下には横堀がある。東の二郭側に向かうと高土塁が開口して横堀に土橋が架かっているが、これは本来の虎口ではなさそうである。この横堀を北へ回り込むと横堀が屈折する部分に虎口がある。主郭の横堀はさらに北の山腹へと続く。一方西尾根側は遊歩道による破壊もあるが、堀切が二条確認できる。
主郭の東にあるのが二郭で東尾根側には横堀を二重に設け、土塁の内側にも溝を切って部分的に三重の堀になっている。この二重の横堀は圧巻で一番の見どころと言えるだろう。この横堀を北へ降って行くと三郭になるが、三郭は東側面こそ横堀となるが、北端部は切岸で曲輪の内部は斜面がそのまま残されている。
登山道は銀閣寺の北側へ回り込んで谷筋を登って行くルートで大文字焼きの展望台を経てさらに登って行く。駐車場は付近の有料駐車場を利用する。
最寄り駅(直線距離)