Il occupe le site de l'ancien Kan-nei-ji, un temple étroitement associé aux shoguns Tokugawa, qui avait construit le temple pour garder le Château d'Edo contre le nord-est, puis considéré comme une direction malchanceuse.
Il se dresse sur le site d'un ancien temple Kan, un temple très proche des shoguns Tokugawa, qui avait construit le temple pour garder le Château d'Edo contre le nord-est.