En dag Wergeland og kona Amalie var ute og kjørte hest, kom de til Slottsparken, og Henrik ble fascinert av utsikten. Her ville han bo. Amalie forteller at han kjøpte stedet på hjemveien, fikk tak i en byggmester og 17. mai 1841 flyttet de inn i Grotten.