Vaaleanpunaiseksi rapattu Rantakasarmi on linnoituksen venäläisellä kaudella rakennettu pääportti. Holvattu, peltikattoinen kivikasarmi rakennettiin vuosina 1868-1870. Kasarmi oli tarkoitettu rauhanaikaisessa käytössä 250 sotilaalle. Osaa rakennuksesta käytettiin päävartiona, jossa oli arestikopit, pidätettyjen kopit ja huoneet vartijoille ja päivystävälle upseerille. Näiden lisäksi kasarmissa oli keittiö, miehistön majoitushuoneet j käymälät. Rakennuksessa on kaunis kellotorni. Kello on saksalaisvalmisteinen ja se on valmistunut vuonna 1868 ja on arveltu, että joku venäläinen kauppias on lahjoittanut arvokkaan kellon varuskunnalle. Nykyään rakennuksessa sijaitsee matkailuneuvonta, Panimoravintola ja taidegalleria.