On raconte que le temple Sairinji aurait été fondé par le docteur Wani, un érudit de Baekje venu au Japon à la fin de l'ère Ojin et converti au bouddhisme. Ses descendants, le clan Bun de Kawachi, œuvrèrent au développement de la culture bouddhiste et, sous le règne de l'empereur Kinmei, ils transformèrent une partie de leur demeure en temple. Le mégalithe situé dans l'enceinte du temple constitue la fondation centrale d'une pagode à cinq étages, un type de structure rare dans l'archéologie bouddhique. La base de la tour, pesant environ 7 500 kan (28 tonnes), est l'une des plus imposantes de la période Asuka.