Hallwyl rūmai buvo pastatyti 1893-1898 m.pagal Isako gustafo Clasono dizainą Grafui Waltheriui von Hallwylui ir jo žmonai Vilhelminai. Jis buvo sukurtas taip, kad tilptų į grafo biurą ir didelę grafienės meno kolekciją. Nors pastato išorė ir teismas yra istorinio stiliaus-skolinantis architektoninius elementus iš viduramžių prototipų ir Renesanso Venecijos — tai buvo techniškai visiškai šiuolaikiška jo užbaigimui — įskaitant elektros energiją, centrinį šildymą, telefonus ir vonios kambarius, o liftas buvo vėlesnis papildymas. Grafienė surinko savo meno kūrinius per savo pasaulines keliones, kad surastų muziejų, todėl rūmai buvo paaukoti Švedijos valstybei 1920 m., praėjus dešimtmečiui iki jos mirties. Kolekcija apima apie 50 000 objektų, o muziejus vis dar atviras visuomenei.