Une forteresse de bois est édifiée à Hardelot pour être remplacée au XIIIe siècle par un château médiéval complet avec tours et douves érigé par le comte Philippe de Hurepel. Le château devient bientôt l’une des premières « résidences secondaires » pour les comtes de Boulogne qui l’utilisèrent comme pavillon de chasse.
