詳細不明。入鹿氏の城と考えられている。
堂ヶ谷城は慈雲寺の南側にある東へ伸びた尾根に築かれている。『日本城郭大系』では入鹿城、『三重の中世城館』では入鹿本城、『紀和町史』では小栗須陣屋平となっている。
慈雲寺の墓地があるが、そこから東へ伸びた尾根の部分が堂ヶ谷城である。広く削平された地形が広がり、内部には小さな社が祀られ、地泉と思われる窪地や井戸のような穴もある。
先端部には高さ1mほどの石積が設けられ、外側は犬走状になっている。西の尾根背後側は墓地となっているためか堀切などの遮断施設はない。
慈雲寺から南の墓地へ登る道がある。