ଏହି ସମୟରେ ଏଡିନବର୍ଗ ଏକ ସାଧାରଣ ସହର ଥିଲା, କିନ୍ତୁ ଡେଭିଡ୍ଙ୍କ ଉତ୍ତରାଧିକାରୀ ମାଲ୍କମ ଚତୁର୍ଥ (୧୧୫୩-୧୧୬୫) ଏହାର ଦୁର୍ଗକୁ ନିଜର ମୁଖ୍ୟ ନିବାସ ଭାବେ ଗ୍ରହଣ କରିଥିଲେ।
ଡେଭିଡ୍ଙ୍କ ଉତ୍ତରାଧିକାରୀ ଥିଲେ ରାଣୀ ମାର୍ଗରେଟ ତୃତୀୟ ଏବଂ ସେ ଏଡିନବର୍ଗ ଦୁର୍ଗକୁ ଯିବାକୁ ନିଷ୍ପତ୍ତି ନେଇଥିଲେ।