Первые сооружения замка были построены в XI веке на искусственно созданной насыпи, высотой в 3 метра. Замок представлял собой деревянную башню, окруженную изгородью. У подножья башни находились два нижних двора, защищенные рвом и изгородью, здесь были расположены дома жителей.
Замок возвышался над деревней, также окруженной оборонительными сооружениями, следы которых видны и сегодня. Вероятно, въезд в деревню проходил через укрепленные ворота. Такая система сооружений широко использовалась при построении деревень и городов в Средние века.
Впервые, описание замка встречается в рукописи от 12 марта 1083 года. Это мирное соглашение между Санче де Лабарт и Беатрис, графиней Бигорр. Находясь на пересечении графств
Бигорр, Коммэнж, Арманьяк, Ор и Лабарт замок зачастую использовался как залог для гарантии мира. Так, например, в 1232 году графиня Петроний графства Бигорр отдала его графу Коммэнж.
Во время Столетней войны, в 1373 году замок был осаждён дюком графства Анжу, братом короля Карла V, а в 1379 году он был отдан Гастону Фебюсу и присоединён к графству
Небузан.
Крепостная стена, усиленная контрфорсами, была построена в XIII веке. Гастон Фебюс соорудил главную башню (донжон) высотой в 37 метров и укрепил стены. Позже, в 1425 году Жан де-Фуа–Грайли (Jean de Foix - Grailly) преобразовал замок для постоянного проживания, превратив его в графский дом. Над входом в замок он установил плиту со своей гербовой символикой « j’ai belle dame ».
После его смерти в 1436 году в замке никто не живет, здесь располагается небольшой гарнизон и прежняя башня превращается в тюрьму.
После окончания религиозных войн замок теряет свою значимость и постепенно превращается в руины. В период Французской Революции жители Мовезэн превращают его в каменоломню, разбирая его по камням для строительства собственных домов.
В конце XIX века замок переходит в частную собственность Аршиля Жюбиналь (Archille Jubinal), а в 1906 году его покупает Альбэн Бибаль ( Albin Bibal), который предпринимает начальные работы по укреплению здания . 28 марта 1907 он передает замок ассоциации «Escola Gaston Febus», которая начинает широкую программу по реставрации этого места...