Il aurait été officier dans la marine marchande d'après la tradition familiale, qui, si elle parle de l'aventure vécue par son frère Emmanuel avec les Allemands durant les années de guerre, ne mentionne pas ce qui est arrivé à Ernest. Il a eu une vie sans doute assez agitée. Marin (mais certainement pas officier de marine), puis ouvrier agricole, il s'installe à la Ferté-Imbault (41) où il semble avoir vécu un certain temps, peut-être marié.