Östlich der Residenz des Landkomturs, ab dem 18. Jahrhundert in Form der heutigen Schlossanlage errichtet, entstand Ellingen im Bereich der heutigen Hinteren Gasse und wurde planmäßig zur Stadt im barocken Stil erweitert.