柑子岳城は、周防大内氏が築いた城であるとされる。築城時期は諸説ありはっきりしていない。

後に大友宗麟が筑前における拠点として改修した。

現在、特に明確な遺構は残っていないが、柑子岳山頂までの道が登山道として整備されており、途中に竪堀の跡や本丸跡らしき遺構を確認する事が出来る。