Pada masa Hindia Belanda, benteng pendem difungsikan sebagai barak militer, penjara militer, serta sebagai gudang logistik perang. Sedang zaman penjajahan Jepang, benteng ini digunakan untuk penjara bagi orang-orang Eropa yang mencoba untuk melawan pemerintahan Jepang saat itu.