築城年代は定かではないが樋爪氏(比爪)によって築かれたと云われる。 樋爪氏は奥州藤原清衡の子清綱がこの地に分家したもので、この辺り一帯から産出される砂金を支配していたという。
文治5年(1189年)源頼朝による奥州侵攻で、清綱の子俊衡と李衡は館を焼いて逃亡した。その後一族は廚川に出て源頼朝に降伏、樋爪俊衡は本領を安堵され、藤原泰衡の子秀安を扶養した。
樋爪館は赤石小学校の南にある薬師神社一帯に築かれていたという。樋爪館の案内板は赤石小学校の北東隅辺りに建っている。
この辺りはかつて発掘調査が行われており、薬師神社の北西から掘立柱建物跡、溝状遺構、井戸などが検出、平安時代末期頃の遺跡という。敷地内には箱清水石卒都婆群、不動明王絵像碑など鎌倉時代の遺跡もある。