丸山城は､伊豆半島西海岸の中程よりやや北寄りにある八木沢地区の西側に駿河湾へ向け北に突き出した岬の先端に築かれた海賊城である。
城域は､岬の鞍部を通過する国道136号で南北二つの領域に分かれており､当初は国道北側の海へ突き出た独立丘陵の丸山だけの小規模な海賊城で､東側に広大な入り江であって格好の船溜まになっていたと考えられている。ここが出城で､頂部が東西30ｍ､南北50ｍの平場に削平され､その北東部の一画に5ｍ四方の土塁が巡る穴倉式郭が設けてある。また､北側に6､7段の腰郭が付帯し､その下方は断崖となる。南側は二段ほど腰郭があって､堀切で遮断している。
国道より南側が本城で南北600ｍ､東西100ｍに亘る広大な城域を有している。昭和58､9年に実施された発掘調査により天正期(1573〜)に拡張されたことが明らかになり､北条氏の城郭には珍しく郭側面に石積が積まれている。しかし､後世の耕作による改変や耕作放棄､或いは未完とも云われることから縄張りの把握は難しい状況にある。