Entré en religion, Charles Joseph Robert de BAGLION de La DUFFERIE est Jésuite en 1883. Il aurait été militaire et Capitaine au Régiment de Chasseur à Rambouillet (78), mais cette information n'est pas vérifiée.