Menurut cerita, benteng ini dulu digunakan untuk tempat berlindung sekaligus pengintaian tentara Jepang.
Di lokasi ini konon terdapat 8 benteng yang tersambung melalui lorong bawah tanah. Bahkan disebutkan ada yang tembus sampai ke pantai sejauh 1 km.
Jika dibersihkan lagi, benteng-benteng ini bisa menjadi tempat wisata sejarah apalagi di dekatnya terdapat beberapa tempat wisata yang sudah terkenal diantaranya bukit wanalela, bukit gajah, pantai Pedalen dan Pantai Karang Agung