Située dans la forêt de Grimbosq, la motte féodale d'Olivet a été construite au XIème siècle sur une butte ayant vue sur l'Orne. L'étude archéologique du site a montré qu'une tentative de défrichement a été effectuée afin de permettre aux paysans du village voisin d'exploiter les terres ainsi libérées. Ce château subsista jusqu'au XVIIème siècle.

Ce type de château a permis aux seigneurs normands d'assurer leur pouvoir sur les territoires qu'ils convoitaient. Construits en bois ou en pierre, ils s'appuyaient sur un monticule naturel ou artificiel.

Au pied de celui-ci, deux basses-cours fortifiées accueillaient les batiments civils et religieux (chapelle, habitations, forge et écuries)