岳山城の西側の出城。

茶臼山城は岳山城の山頂から西へ派生した尾根の先端が小高くなった標高100m程の山に築かれている。

山頂は切岸によって小高くなった曲輪が二段あり、石祠が祀られている。その下には横堀とも土塁付きの腰曲輪ともとれる遺構が広がる。土塁は幅広で等間隔で土塁が切れ、一部は竪堀のようになっている。

道はない。尾降神社の東にある溜め池付近より尾根伝いに山頂へ登る。