Dès le début du X ème siècle , une forteresse est construite sur la butte qui domine la vallée de la Scie , fleuve de 40 km qui prend sa source à Saint Victor L’Abbaye et se jette dans la Manche à Pourville .

Ce château que bâtit Gauthier – Giffard est refait sur une ancienne construction carolingienne fortifiée, tout en bois .

Il est de dimensions modestes avec une cour de 150 m sur 70 m , entourée d’une haute muraille et ceinturée par un    double fossé .

Sa particularité est son donjon situé sur une butte isolée du château et son entrée qui se fait par 2 ponts – levis opposés .