В течение 18 века Холируд был заброшен сменявшими друг друга британскими монархами, которые предпочитали оставаться в своей лондонской резиденции, хотя в этом районе проживали шотландские дворянские семьи.
Британские монархи часто посещали Холируд в 18 веке.