詳細不明。美作菅家の一族皆木氏・豊田氏の居城と伝えられる。

加賀尾城は淀川の東岸にあり、杉神社の南にある比高40m程の丘陵に築かれている。

主郭は山頂にあって南北に長く北端に土塁が残っており、周囲は比較的高い切岸になっている。南側は緩やかな地形が続き、北側はやや平坦な地形になっているが、主郭ほど明確な切岸は設けられておらず遺構の判断は難しい。

城山の北側にある杉神社に向かう道から林道が通じている。

付近の城(直線距離)
1.6km 美作 丸山城(奈義町)
1.7km 美作 久常城
2.0km 美作 福光屋敷
2.4km 美作 永光城
2.5km 美作 笹尾城
2.6km 美作 比丘尼城(中島東)
3.4km 美作 今宮城
3.5km 美作 有元城
3.6km 美作 石引城
3.6km 美作 大別当城
3.9km 美作 鎌倉山城
4.0km 美作 長畑構
4.1km 美作 八巻城
4.3km 美作 菩提寺城
4.4km 美作 小房城
4.4km 美作 上ノ山城
4.6km 美作 富坂屋敷
4.6km 美作 吉正城
4.6km 美作 比丘尼城(大町・長谷内)
5.0km 美作 名木の城
5.2km 美作 鎌倉屋敷
5.4km 美作 星尾城
5.4km 美作 河内山城
5.4km 美作 別所山城

2011年4月