Ravnedalen ble bygget av soldater under kommando av general Joseph Frantz Oscar Wergeland (bror til Henrik W. og Camilla Collett, og formann i Byselskabet). Da det på slutten av 1860-tallet forelå planer om å bygge skytebane her, rykket generalen ut: "Det er det rene helligbrøde", mente han. "Dette området egner seg så aldeles fortreffelig til et lystanlæg".
Fram til 1860-tallet var rundt 1200 soldater forlagt i dette området, dengang kalt "Grimsmoen". Men da grunneierne sa opp avtalen med forsvaret, ble leiren flyttet til Gimlemoen. I 1872 søkte Byselskabet om bidrag fra Christiansands Sparebank til anlegget i Ravnedalen, og i perioden 74-78 ble parken bygd ved utradisjonell bruk av soldater fra underofficerskolen, utrustet med spader, frø og planter i stedet for våpen. Et myr- og sumpområde med bratte fjellskrenter rundt ble på 4 år forvandlet til en park med "kultivert natur", dammer, stier og mange forskjellige planteslag.