Istorija muziejaus Kalėjimo vartų driekiasi gylis į septynis šimtmečius, neveltui jis yra įtrauktas į sąrašą 100 svarbiausių istorinių paminklų Olandijoje.

Į 1280 m. vartų aikštėje Бейтенхоф buvo pagrindinis įvažiuojant į pilį, kuri yra dabar, kaip ir Бинненхоф. 1428 metais vartai plieno būti naudojamas kaip vieta sudarymo skolininkams arba nusikaltėliai, ожидавших teismo.

Šimtą metų buvo prie vartų пристроены naujos kameros ir prielaida teismo. Iki XVII amžiaus atėmimas nėra laikomas bausme kaip таковым - bausme buvo baudas, išvarymas, fizinė bausmė arba mirties bausmė.

Čia tab ra žinomos istorinės asmenybės: Корнелис de Витт, nuteistas sąmokslo prieš Вильгельма Оранского, ir rašytojas, mokslininkas ir filosofas Dirk Волькертсен Коорнгерт. Kalėjimas просуществовала 400 metų, bet prie 1828 metais kalinių čia jau nebuvo. Du kartus высказывались pasiūlymus dėl сносе šio statinys – 1853 ir 1873 metais, laimei, iki reikalus ne дошло, ir su 1882 Тюремные vartai tapo muziejuje. Kai kurios dalys muziejų galima aplankyti tik su экскурсовода.

Į kaimyninių pastate yra Galerija Вильгельма V – nacionalinė dailės galerija, įkurta 1774 m. Вильгельмом V, принцем Оранским. Nuo 2010 metų lankytojai gali patekti į galeriją pagal laikiklis laiptai, kuris jungia du pastatai. Kolekcija, kuri yra atstovaujama ten dabar – tai moderni rekonstrukcija 1774 m., kuri taip pat buvo įsikūrusi viršutiniame aukšte namuose. Paveikslai glaudžiai развешены sienos, kaip tai buvo įprasta XVIII amžiuje. Vaizdingas полотна buvo perduotas музею Маурицхейс į 1822 m., kuris yra formalus savininkas paveikslų.