Dessen Sohn Gilles de Voisins begann im Jahr 1284 mit dem Bau der heutigen Burganlage, die an einem Hirtenweg in Richtung der höhergelegenen Bergregionen der Corbières lag. 1316 wurden die Bauarbeiten beendet.