창건 연대는 불상입니다만, 연희식내의 고사입니다. 모토이가가 미야야마의 땅에 있어, 산토신으로서, 또 요도가와의 진수로서 어신위 높고, 고래 항행의 선인들이 통항의 안전과 수해 배제 기원을 위해서 창건해, 개화제의 고대에 이카색 남명, 이카 색녀명의 저택 내에 타카오카미의 오카미를 봉사했다고 전해지고 있습니다. 요시미 신사의 자료실에는 수학의 에마인 「산액」이 보관되어 있습니다. 이것은 신불의 가호에 의해 수학자로서의 향상을 기념하여 봉납하는 것입니다. 수학자의 이와타 키요호는 당지에 병 요양을 위해서 체재해, 병의 치유한 답례에 분쿠 원년(1861년), 스가 신사의 전신인 우즈텐 왕사에 봉납했다고 합니다. 또, 경내에는 약 110그루의 매화가 있어 「요시미의 매화림」으로서 유명합니다.