Ueno pils, kas sākotnēji tika uzcelta 16. gadsimta beigās un vēlāk paplašināta, kalpoja par vietējo kungu vietu Edo periodā (1603-1867). Pils tornis tika iznīcināts vētrā mazāk nekā 50 gadus vēlāk un netika pārbūvēts līdz 1935. gadam, kad vietējais iedzīvotājs nodrošināja finansējumu torņa rekonstrukcijai.
Atšķirībā no daudzām citām Japāņu pilīm, kas 20. gadsimtā tika rekonstruētas, izmantojot betonu, Ueno pils tika pārbūvēta tikai ar koku, piešķirot tai skaistu, oriģinālu izskatu un atmosfēru gan iekšpusē, gan ārpusē. Akmens sienas pils rietumu pusē ir visaugstākās Japānā ar iespaidīgiem 30 metriem.