Il fut construit par l'impératrice Suiko pour protéger le mausolée (Sankoichibyo) où reposaient le prince Shōtoku, sa mère et son épouse. On raconte que l'empereur Shōmu développa le vaste complexe en 724 (première année de l'ère Jinki). À partir de l'époque Heian, il devint un lieu sacré dédié au culte du prince Shōtoku, connu sous le nom de « Kaminotaishi », l'un des « Trois Princes de Kawachi ». À la fin de l'époque Sengoku, la montagne entière fut ravagée par un incendie provoqué par la guerre d'Oda Nobunaga. Cependant, dès la reconstruction du Seireiden par Toyotomi Hideyori en 1603 (huitième année de l'ère Keichō), le complexe fut progressivement reconstruit et continue de l'être jusqu'à nos jours.