这里是通过天野街道前往纪州熊野的人们参拜的地方，所以也被称为熊野神社。很久以前，有神佛同体说，有将神明和菩萨供奉在同一个地方的时代。三都神社因其信仰而经历了不可思议的历史。传说是7世纪创建的，遭遇战火烧毁过一次，但是在16世纪由叫做放弃观的僧人在金藏寺内重建了。之后，明治时代的神佛分离留下了这个神社，金藏寺消失了。