Bem educado em geral, e um professor de filosofia e retórica. Juntou-se aos beneditinos em Rebais-en-Brie para escapar do mundo e as tentações apresentadas pelo sucesso em seu campo. Contra sua vontade, ele foi feito abade da Abadia de Pontoise pelo rei Filipe I; Walter lembrou ao rei que era pela vontade de Deus que ele fez tal coisa, não da coroa. Ele fugiu da casa várias vezes para escapar da posição, a última vez para Roma, Itália, onde deu ao Papa Gregório VII sua renúncia escrita; o papa disse-lhe para voltar para sua casa, assumir suas responsabilidades como abade, e nunca mais sair. Ele obedeceu. Trabalhou contra a simonia, a disciplina de lax, e dissolute vidas de alguns de seus clérigos. Ele se opôs aos corruptos e aos corruptores que ele lutou, e eles finalmente recorreram para aprisionar e bater nele. Em sua libertação, ele retomou seu trabalho, muitas vezes passando toda a noite na capela, orando por força e sabedoria.