Die ersten Bauwerke wurden zwischen 1443 und 1456 vom Deutschen Orden errichtet, am Ende des 16. Jahrhunderts, nach dem Zusammenbruch des Deutschordensstaates 1562, wurde auf dem Gelände der Vorburg eine Residenz des kurländischen Herzogs errichtet.