天正10年(1582年)真田昌幸によって築かれたと云われる。
天正10年(1582年)甲斐の武田勝頼は信濃から侵攻してきた織田信長の軍勢に対抗することができず、新府城を退去することとなった。このとき真田昌幸は岩櫃城へ勝頼を迎え入れることを提案して許され、このとき勝頼を迎えるために築いたのが古谷館とされる。しかし、勝頼は外様の真田氏より小山田氏を頼ることを選択し、その途中、天目山で自刃して滅亡してしまった。
その後、この御殿跡は潜竜院という寺院となり明治まで続いたという。
古谷館は岩櫃山の南山腹にあり、郷原から岩櫃山へ登る赤岩道の途中にある。
岩櫃山側に石垣の段があり、これが遺構とされる。
郷原地区にある岩櫃山登山者ようの駐車場が利用できる。ここから赤岩道の登山道沿いに進めばたどり着く。
最寄り駅(直線距離)