Дворец стоит у подножия Королевской Мили в Эдинбурге, на противоположном конце Эдинбургского замка.
Холирудский дворец, или неофициально Холирудский дворец, основанный как монастырь Давидом I Шотландским в 1128 году, служил главной резиденцией королей и королев Шотландии с пятнадцатого века.