Museet har til huse i det smukke palæ, kaldet Lady Trappe ' s Hus, som blev bygget i 1622, og det er opkaldt efter en tidlig ejer, Elisabeth, Enke, Grevinde af Trappe. Bygningen blev doneret til byen Edinburgh i 1907 for at blive omdannet til et museum.Nogle af de vigtigste genstande, der ligger i museet, inkluderer den trykpresse, som Sir Scottalter Scotts romaner blev trykt på, hans spisebord, Robert Burns skrivebord og Stevensons fiskestang og rygerør. Selvom du måske ikke være en Scott, Burns eller Stevenson entusiast, museet ligger på Royal Mile, den historiske bygning, hvor det har til huse er meget charmerende
