Ernst Wilhelm Optatus Olsoni syntyi Helsingissä kamreeri Fredrik Wilhelm Olsonin ja muurarintytär Maria Charlotta Leanderin ensimmäisenä lapsena.

Isä Olsoni (s. 1830) oli syntyisin Pälkjärveltä (luovutetulla alueella), hänen isänsä oli varatuomari. isä Olsoni kävi koulunsa Kuopiossa, opiskeli Helsingissä ja suoritti suuremman kameraalitutkinnon 1854. Isä Olsoni meni 28.2.1857 naimisiin Maria Charlotta Leanderin kanssa. Ernst syntyi 28.7.1860.

Isä Olsoni oli erilaisissa tehtävissä Loimijolla ja Vihdissä kunnes 1876 asettui Tampereelle Pirkkalan kihlakunnan henkikirjurina. Tässä vaiheessa kolmilapsisen perheen vanhin, Ernst Wilhelm, kuoli 17 vuoden iässä 2.12.1877.

Isä oli vielä henkikirjurina vuoteen 1883 ja sen jälkeen Tampereen väkiviinatehtaan kontrollöörinä kuolemaansa asti 1894. Äiti Maria Charlotta Leander eli vielä 1900-luvun puolelle ja kuoli 1908.