小浜市街地の南側、JR小浜駅の西南に万葉の山として名高い後瀬山がある。海抜168mとさほど高くはないが、小浜湾から望む山の姿は誠に端麗であり、若狭おばまの象徴として市民から親しまれている。この山の山裾周辺には、妙興寺・八幡神社・発心寺など中世以来存続する著名社寺が所在し数多くの古文書も残されている。また、北側山裾は丹後街道が走っており交通の要所でもあった。

城は後瀬の山頂に主郭を配し、それより北側に伸びる稜線上につくられており総延長400m、最大幅30mをはかる。

これが城の主軸となっており4ブロックにわかれるが最先端は八幡神社の裏山に至る。さらに山頂主郭の西南に張り出した稜線の妙興寺へ向かって下がる枝峰にも3ブロックが認められ延長220mが計測される。その他、八幡神社と妙興寺の中間山腹にも小郭が存在する。

両社寺の間には若狭守護武田氏の館があり（現・小浜小学校、空印寺）ここより裏山へ通じる道があったと聞くが現在は小浜線によって山裾を削られ消滅している。

城の比高差は最下段から主郭まで100mにもおよぶ。山の東西両側面はかなりの急傾斜を形成し、とくに東側伏原地域が顕著である。したがって城郭は西側に集中し、東では主郭の下方に竪堀が一本認められるのみで平場はまったく見当たらない。

この城は若狭地方最大の規模を誇るが、全国的に見た場合はさほど大きくなく、幅も非常に狭小である。しかし、この山は開発されておらず一部の破損はあるものの往昔の姿をよくとどめているもので、かつての縄張りを伺うことが出来る。