由於經由天野街道前往紀州熊野的人們都會參拜，因此也被稱為熊野神社。很早以前，就有「神與佛教一體」的說法，曾一度出現神與菩薩同處供奉的時期。神社因其信仰而經歷了一段神秘的歷史。相傳始建於 7 世紀，一度毀於軍火，16 世紀由一位名叫大觀的僧侶在金藏寺內重建。後來明治時期神佛分離，這座神社得以保留，金藏寺消失了。