Povedati zgodbo o muzeju islamske umetnosti je povedati zgodbo o brezkompromisnem arhitektu. Ko se je projekt začel, je bila prva naloga pritegniti 90-letno arhitekturno ikono I. M. Pei iz upokojitve. Pei — znameniti za dodajanje lepa razširitve muzejev, kot je narodna Galerija Umetnosti in Louvre — nato preživel šest mesecev ogledu Islamskega sveta za navdih. Ko je bil Pei navdihnjen in prepričan, da bo delal, je predlagal, da bi stavba izgledala bolje, če bi bila 60 m od obale na otoku, ki ga je ustvaril človek. In tako je bilo. Posledično stavbe je kot izrazito Pei, kot je Islamska, iz velikanske kose kamna, ki so zložene na vrhu vsake druge; stavbe zdi, da je bila približno za tisoče let, in posodi, da misli, da bo približno za veliko več.