تأسس معبد هوراكوجي عام ١١٧٨ على يد تايرا شيغيموري، الابن الأكبر لتايرا كيوموري، زعيم عشيرة تايرا. ويُقال إن شيغيموري بنى المعبد تخليدًا لأرواح شهداء ثورتي هوغن وهيجي، انطلاقًا من مبدأ المساواة بين الصديق والعدو، ولإيواء الإله الحارس لميناموتو نو تاميتومو، بوديساتفا نيويرين كانون. دُمر المعبد بالنار خلال حملات أودا نوبوناغا عام ١٥٧١، ولكن أُعيد بناؤه في منتصف فترة إيدو باستخدام قصر عشيرة أودا في مقاطعة ماتسوياما في ياماتو. وهناك تقع القاعة الرئيسية والبوابة الحاليتان. يُعرف المعبد أيضًا بأنه المكان الذي درس فيه جيون سونيا (1718-1804)، الذي يُشاد به باعتباره "شاكياموني الصغير في اليابان"، الحروف السنسكريتية وبشر بكلمات دارما العشرة الصالحة (طريق الإنسان)، وأصبح راهبًا في سن الثالثة عشرة. يوجد داخل أراضي المعبد متحف كوساكا كيسيكي التذكاري، الذي يضم أعمال الراحل كوساكا كيسيكي، الخطاط الذي حصل على الجائزة الإمبراطورية من أكاديمية الفنون اليابانية.