Durbuy est entré dans l'histoire avec son château féodal au 11ème siècle, mais on considère que c'est vers 889 que fût construit le 1er château fort. Il fût cependant détruit un siècle plus tard et c'est au 11ème siècle que Henri 1er de Namur, Comte de Durbuy, fit rebâtir la forteresse. En 1726, la famille d'Ursel reprend l'engagère et, dès 1756, elle devient propriétaire du château. C'est en bordure de l'Ourthe, après le vieux pont situé à l'entrée de la ville que se dresse donc le château des Comtes d'Ursel.