Le château, exemple parfait du classicisme sous Louis XV, a été construit pour les Le Coulteux, puissante famille de Finances de Rouen. Le riche mobilier a été transféré au château de Ste-Vaubourg, voisin, au milieu du XIXe siècle (il a depuis peu été dispersé). Les lucarnes de la façade ont été remaniées au second Empire. L'édifice a été attribué à la Sous-Préfecture après la Seconde Guerre mondiale, tandis que les espaces intérieurs étaient profondément modifiés.