南北朝時代から戦国時代に増築を進められてきた城で、最盛期には南北750メートル、東西1,050メートル、城域全体の面積は50万平方メートルと言う広大な規模を誇っていた。本丸に当たる亀丸城以外に「山之城」「蔵之城」「花見城」「御仮屋城」「東之城」「西之城」と6つの曲輪が設けられていた。駐車場、トイレ、案内板がある。御仮屋城は水道局の施設が置かれ、また耕作地になっている郭もある。
地勢は、城の東から南に向かって伊作川が流れ、北と西側は多宝寺川が流れて、天然の堀となっていた。北から東側はシラス台地につながっているため攻め込まれないよう箱堀が掘られていた。
この城は島津貴久、島津忠将、島津尚久の忠良の3人の息子、そして島津義久、島津義弘、島津歳久、島津家久の島津四兄弟の誕生地でもあり、記念の石碑が残っている。
