ここは天野街道を通って紀州熊野に向かう人々が参詣したことから、熊野神社とも呼ばれています。その昔、神仏同体説があり、神様と菩薩様を同じ場所に祭っていた時代があります。三都神社（さんとじんじゃ）はその信仰により不思議な経緯を経ています。伝承では7世紀の創建とされ、兵火にあって一度は焼失しますが、16世紀に諦観という僧によって金蔵寺内に再興されました。その後、明治時代の神仏分離ではこの神社が残り、金蔵寺が姿を消しました。