Kuil ini dibangun oleh Kobo Daishi Kukai ketika ia mendirikan Gunung Koya pada tahun 816 dan juga merupakan kuil keluarga dari keluarga Tokugawa.