桃原城は桃原集落の南背後の阿弥陀峰にあり、多賀と上石津を結ぶ交易の道である「五僧越え」を扼するとともに、併せて上方から桃原の集落を防御し、短期間ではあるが桃原の詰め城であったと考えられている。
城跡は、高室山から北西に延びるカルスト状台地の北端、杉坂峠の北400m程に位置し、北側と西側は比高約300mの絶壁をなし、台地続きの南側と東側は全長500mに及ぶ切岸と土塁を廻らしている。切岸と土塁は、西端部の絶壁上から北東端部の幅12.7m、深さ4.5mの堀切まで続いている。その高さは、外側で2.7mから4.5m程、内側で0.6mから1.2m程である。また、この切岸と土塁には、数か所の開口部があり、特に中程あたりには開口部の前方に
] 状のカザシ土塁を伴う虎口がみられる。
城跡の中央部には、北・北東・南西の三つのピークに囲まれた大きなすり鉢状の凹地があり、その周囲を高さ1m弱の薄い土塁が東西150m×南北50mの範囲で囲み、南側で切岸上の土塁に接続している。北東ピークの北寄りに土塁跡と思われる微かな土の盛り上や西ピークに横堀状の溝が見られる程度で石灰岩が方々に露出し削平の形跡は見当たらない。
しかし、この城は不思議な構造をしている。三つのピークで馬蹄形に取り囲まれた低地部を土塁で囲み、南側で接続する切岸と土塁もその部分が最も低く薄くなっている。攻め上ってくる敵を誘い込み迎え撃つ枡形のような施設のようにも思えるが、それにしては広すぎる。冬の厳しい北西風を避けるために、敢えて凹地に郭を設けたのであろうか。
いずれにしてもピークに郭を設ける一般的な城の構造とは異なっていることは間違いない。