Het in 1561 opgerichte Dolhuis was gevestigd aan de Kloveniersburgwal, toen aan de rand van de stad. Al spoedig bleek de behuizing te klein. Om het benodigde geld voor nieuwbouw binnen te halen werden loterijen georganiseerd, zoals die van 1591-1592, waarbij allerlei prijzen waren te verdienen. De gewenste uitbreiding van het Dolhuis zou overigens pas in 1617 gereedkomen.