ศาลเจ้าแห่งนี้ประดิษฐานคุเรฮาโตริ สตรีผู้ซึ่งกล่าวกันว่าเดินทางมาจากแคว้นอู๋ในรัชสมัยจักรพรรดิโอจิน และได้นำเทคนิคการทอผ้าและการย้อมสีมาสู่ญี่ปุ่น ในรัชสมัยจักรพรรดิโอจิน อะจิโนะโอมิและสึกะโนะโอมิ บุตรชายของเขา ถูกส่งตัวไปยังแคว้นอู๋ในประเทศจีนเพื่อขอช่างทอผ้าที่สามารถย้อมและทอผ้าได้ หลังจากการเดินทางอันยาวนาน ทั้งสองก็เดินทางมาถึงแคว้นอู๋และได้ขอพระราชาแห่งแคว้นอู๋ให้อนุญาตให้พวกเขาเดินทางมายังญี่ปุ่นพร้อมกับช่างทอผ้าสี่คน ได้แก่ คุเรฮาโตริ อะยะฮาโตริ เอฮิเมะ และโอโตฮิเมะ เมื่อเดินทางมาถึงที่นี่ ช่างทอผ้าเหล่านี้ได้ทอผ้าและถ่ายทอดเทคนิคอย่างไม่รู้จักเหน็ดเหนื่อยทั้งกลางวันและกลางคืน ซึ่งกล่าวกันว่านำไปสู่การสร้างสรรค์เครื่องแต่งกายมากมายนับไม่ถ้วนในญี่ปุ่นที่เหมาะสมกับฤดูกาล เพศ และชนชั้นทางสังคม ด้วยเหตุนี้ ผู้คนจำนวนมากที่เกี่ยวข้องกับสิ่งทอและเครื่องแต่งกายจึงเดินทางมาขอพรที่ศาลเจ้าแห่งนี้