Múzeum sídli v krásnom kaštieli Lady Stair ' s House, ktorý bol postavený v roku 1622 a je pomenovaný po skorej majiteľke Elizabeth, Vdovskej grófke schodiska. Budova bola darovaná mestu Edinburgh v roku 1907, aby sa premenila na múzeum.Medzi najdôležitejšie objekty umiestnené v múzeu patrí tlačiareň, na ktorej boli vytlačené romány sira Waltera Scotta, jeho Jedálenský stôl, písací stôl Roberta Burna a rybársky prút Stevensona a Fajka. Aj keď nemusíte byť nadšencom Scott, Burns alebo Stevenson, múzeum sa nachádza na Royal Mile, historická budova, v ktorej sa nachádza, je veľmi očarujúca