築城年代は定かではないが室町時代に櫛橋氏によって築かれたと云われる。 櫛橋氏は藤原氏の末裔で櫛橋伊朝を祖とし代々赤松氏の家臣であったという。 代々天神山城を居城とし、永禄年間(1558年〜1570年)の櫛橋秀則のとき、水不足から居城を船原城へと移したと云われ、それがこの志方城と考えられている。

天正年間(1573年〜1592年)に別所氏と結んで羽柴秀吉に対抗したが敗れ落城したという。

城は志方小学校の南にある観音寺を本丸とし、志方小学校を含む広大な敷地に築かれていたという。しかし現在では市街地に没してその面影を見ることはできない。

観音寺の山門を潜った所に案内板が建っている。