Avant la construction du château d’Ueno, il y avait un temple appelé « Heiraku-ji » où le conseil de guerre de la troupe d’Iga se réunit durant l’attaque de Nobunaga Oda. Même aujourd’hui, on peut y voir les Gorinto (pagodes bouddhistes) et des statues bouddhistes en pierre.