El castillo de Wakae fue construido por el clan Hatakeyama, guardián de la provincia de Kawachi, a principios del período Muromachi y ha soportado numerosas guerras desde entonces. Durante la era Tensho, Christian Ikeda Tangonokami Norimasa se convirtió en el señor del castillo y construyó una iglesia y otras estructuras, convirtiéndolo en un centro de la cristiandad en Kawachi, junto con Yao, Sanka (actual ciudad de Daito) y Okayama (actual ciudad de Shijonawate). Sin embargo, no se encontraron registros de su uso como base para los ataques de Nobunaga al templo Ishiyama Honganji, y permaneció como un "castillo fantasma" durante mucho tiempo. No obstante, las excavaciones realizadas después de 1972 descubrieron parte de un foso que rodeaba el centro del castillo, confirmando una vez más su existencia. Mide aproximadamente 380 metros de este a oeste y 280 metros de norte a sur (Diccionario de topónimos japoneses Kadokawa). Actualmente hay un monumento que marca el sitio del castillo al pie de la pasarela frente al Centro Comunitario Wakae, pero mucho sobre el castillo sigue siendo un misterio.