富永氏の詰城という。富永氏館を参照。

高谷城の所在は明らかでない。富永氏の菩提寺である清雲寺の北東背後の山が推定地になっているので登ってみたが、まったくの自然地形で遺構はない。