創建年代は不詳。口碑によると宝亀三年に春日明神を高島神社に勧請の際、荒祭宮として宮浦に小祠を建立したのに創まると言い伝えている。その後古文書は紛失して僅かに天明四年の文書があるのみである。