De Abbaye du Valasse draagt een andere naam, notre dame du vœu. We kunnen beter spreken van een dubbele gelofte, want in de 12e eeuw had Matilda de Keizerin, de kleindochter van Willem de Veroveraar, gezworen een abdij te stichten toen ze gevangen werd gehouden in Oxford. Tegelijkertijd legde Galéran de Melan een identieke gelofte af als hij een verschrikkelijke storm zou overleven bij zijn terugkeer van de kruistochten. Nu ze allebei veilig waren, besloten ze een abdij te stichten
De aartsbisschop van Rouen adviseerde Galeran de Meulan en Mathilde hun geloften te combineren, en zo bevestigde paus Adrianus IV op 18 februari 1156 de stichting van de abdij van Le Valasse onder de naam Notre Dame du Vœu.
Een gemeenschap van cisterciënzer monniken nam vervolgens haar intrek. De cisterciënzer monniken hielden zich aan de regel van Sint Benedictus en richtten zich op gebed, handenarbeid en de ontwikkeling van het land.
Door de eeuwen heen zou de abdij van Valasse alle tegenslagen van de geschiedenis te verduren krijgen.
De Honderdjarige Oorlog, waarbij de abdijkerk werd verwoest. In de 15e en 16e eeuw werd de kerk herbouwd in een gotische stijl die ver af stond van de soberheid van de cisterciënzer stijl. De abdij werd echter opnieuw beschadigd in 1516.
Tijdens de Revolutie werd de abdij verkocht als nationaal bezit. De abdijkerk werd verwoest en de rest van de abdij werd in 1792 de residentie van een rijke koopman uit Le Havre: Jacques-François Begouen.
Aan hem danken we het klassieke kasteeluiterlijk zoals we dat vandaag de dag kennen. Het was ook in deze tijd dat de omgeving van het landgoed werd aangelegd door de architect Pierre-Adrien Paris.
Deze transformaties werden voortgezet door de familie Fauquet-Lemaitre, die in 1833 eigenaar werd van het pand. Zij verlieten de abdij na de Tweede Wereldoorlog.
De abbaye du Valasse werd vervolgens een zuivelfabriek waar de kaas Le Lillebonne werd geproduceerd. De kaasproductie veroorzaakte grote schade aan het gebouw, dat in het eerste decennium van de 21e eeuw grondig moest worden gerestaureerd.
