Bien que l'on ne sache pas exactement quand il a été fondé, il s'agit d'un ancien sanctuaire qui aurait été utilisé par l'empereur Jinmu pour prier pour le succès de son expédition vers l'est. Au cours de la deuxième année du règne de l'empereur Chuai (200), lorsque l'impératrice Jingu visita cette région, de l'eau pure commença soudainement à jaillir. On dit que l'impératrice en était satisfaite et la vénérait comme une source sacrée, c'est pourquoi la région fut appelée « Izumi ». On raconte également que Toyotomi Hideyoshi faisait transporter cette eau Izumi Shimizu jusqu'au château d'Osaka et l'utilisait pour les cérémonies du thé. Au cours de la 2e année du Reiki (716), lorsque Izumi-no-gen fut créé et que cette zone devint le centre de la politique locale, Izumi Gosha (Gosha Daimyojin : Otori/Izumi) fut construit à côté du sanctuaire Izumi Inoue. a été construit pour consacrer Anashi, Hijiri, Sumikawa et Hine. Au nord de la salle principale du sanctuaire Izumi Inoue, le bâtiment principal de Gosha Soja, reconstruit par Hideyori Toyotomi en 1605, subsiste et est désigné bien culturel d'importance nationale.