Prenez un peu de recul par rapport aux étals et pensez à Ueno lui-même. Juste à côté du marché s'étend le parc d'Ueno, qui fut autrefois l'enceinte du temple Kan-eiji, le temple familial des shoguns Tokugawa. Il a ouvert ses portes comme parc public en 1876. Aujourd'hui, le quartier d'Ueno est un centre culturel doté de nombreux musées, ce qui contraste fortement avec l'agitation quotidienne du marché. À courte distance, à Ikenohata, se dresse l'ancienne résidence Iwasaki, construite en 1896 pour l'industriel Iwasaki Hisaya et conçue par l'architecte anglais Josiah Conder. Elle comporte une aile occidentale destinée aux réceptions et une aile japonaise réservée à la vie quotidienne. Son aile occidentale et sa salle de billard ont été classées biens culturels importants en 1961. Entre les enceintes des temples shogunaux, les demeures de l'ère Meiji et un marché situé à côté de la gare, ce coin de Tokyo révèle plusieurs strates de la ville à la fois.