Отец Шарля Делорье, бывший пехотный капитан, выйдя в отставку в 1818 году, возвратился в Ножан, женился и на деньги от приданого купил должность судебного пристава, которая еле-еле давала ему средства к существованию. Озлобленный рядом несправедливостей, страдая от старых ран и не переставая жалеть об Императоре, он изливал на окружающих душивший его гнев. Не многих детей колотили так часто, как его сына. Несмотря на побои, мальчуган упорствовал. Если мать пыталась за него заступиться, отец обходился с нею так же грубо, как и с сыном. Наконец капитан засадил его в свою контору, и мальчик целыми днями должен был, согнувшись, переписывать бумаги, отчего правое плечо у него стало заметно выдаваться.