El Templo Senshoji se construyó sobre las ruinas del Castillo Ayai, que antaño se alzaba en la ciudad de Takaishi. Cuando el Castillo Ayai fue incendiado durante el período Sengoku, uno de sus sirvientes escapó del templo cargando al Buda Amida a la espalda. Rodeado de enemigos, se arrojó al foso del castillo junto con el Buda Amida y murió. Tiempo después, el sacerdote Genyo, guiado por una revelación en sueños, descubrió al Buda Amida en el foso del castillo. Lo consagró y construyó un templo sobre las ruinas del castillo. Los sellos del castillo que se venden tienen grabado el nombre del templo, lo que los hace excepcionales.