El Templo Horakuji fue fundado en 1178 por Taira Shigemori, hijo mayor de Taira Kiyomori, jefe del clan Taira. Se dice que Shigemori construyó el templo para honrar a los espíritus de los caídos en batalla durante las Rebeliones Hogen y Heiji, en el espíritu de igualdad entre amigos y enemigos, y para albergar a la deidad guardiana de Minamoto no Tametomo, el Bodhisattva Nyoirin Kannon. El templo fue destruido por un incendio durante las campañas de Oda Nobunaga en 1571, pero fue reconstruido a mediados del período Edo utilizando el palacio del clan Oda del Dominio Matsuyama en Yamato. Aquí es donde se encuentran la sala principal y la puerta actuales. El templo también es conocido como el lugar donde Jion Sonja (1718-1804), elogiado como el "Pequeño Shakyamuni de Japón", estudió caracteres sánscritos y predicó las Diez Buenas Palabras del Dharma (el Camino del Hombre), y se convirtió en monje a los 13 años. Dentro del templo se encuentra el Museo Conmemorativo Kosaka Kiseki, que alberga las obras del difunto Kosaka Kiseki, calígrafo galardonado con el Premio Imperial de la Academia de Arte de Japón.