飯盛山城の築城年代は不明だが許斐岳城(このみだけじょう)の詰めの城として宗像氏(むなかたし)が築城したと云われている。
この城の築城目的は宗像氏が立花氏への脅威に備え築城したと思われる。
大友氏の後ろ盾を当時得ていた立花氏は毛利氏に従っていた宗像氏と常に争いが絶えなかった。
そのため立花氏は本拠となる立花山城から交通の要所であった許斐岳城を攻め立てる必要があり飯盛山城はその立花氏への守衛の為に重要な城であった。

現在の飯盛山城址は飯盛山山頂に腰曲輪や土塁が残っている。
標高157mの低山として多くの方が登山に来ており登山道入口から10分程度で山頂に行く事が出来るため城址というより憩いの場所として知られている。
その山頂は城台となっておりそこから下へ腰曲輪が確認出来た。
また9合目辺りに二の丸と思われる広場も確認する事が出来る。