奥州藤原氏と関係のあった高橋氏の居城といい、葛西氏の家臣二階堂氏に敗れ、二階堂平内(助)の居城となったという。

高橋館は玉山から西に伸びた丘陵に築かれている。辺りは田畑や宅地となっているが、西側に堀が残っているという。

「宮城県の埋蔵文化財」には「浅部館」となっている位置に標柱がある。「高橋館」はここより西100m付近にマークされているのだが、周囲は宅地になっていて確認できず、標柱も見当たらない。