Uma juventude piedosa, Pierre-Joseph sentiu um apelo ao sacerdócio, mas depois de meses de tutoria por seu pároco, era óbvio que Pierre-Joseph não seria capaz de dominar estudos de seminários diocesanos. Em vez disso, em 5 de dezembro de 1894, foi enviado para a Abadia de Sainte-Marie-du-Désert, onde os estudos eram mais simples desde que não havia responsabilidades pastorais, mas onde ainda era uma luta acadêmica. Benedictine Cisterian Trappist monk, tomando o nome Marie-Joseph. Membro da Associação das Almas Vítimas. Ordenado em 12 de outubro de 1902 após oito anos de estudo; ele viveu nove meses como sacerdote. Tendo desenvolvido a tuberculose, sua saúde já estava falhando pelo tempo de sua ordenação. Ele foi enviado para casa para sua família por sete semanas para descansar, mas continuou a recusar e pediu para voltar para a abadia onde passou seu tempo restante trabalhando na enfermaria.