A múzeum az 1622-ben épült Lady Stair ' S House nevű gyönyörű kastélyban található, amelyet egy korai tulajdonosról, Elizabeth-ről, a lépcső Dowager Grófnőjéről neveztek el. Az épületet 1907-ben adományozták Edinburgh városának, hogy múzeummá alakuljon.A múzeum legfontosabb tárgyai közé tartozik a nyomda, amelyen Sir Walter Scott regényeit nyomtatták, az étkezőasztal, Robert Burn íróasztala, Stevenson horgászbotja és pipája. Annak ellenére, hogy nem lehet Scott, Burns vagy Stevenson rajongó, a múzeum a Royal Mile-en található, a történelmi épület, ahol található, nagyon bájos