御祭神、神日本磐余彦尊が吉備高島の宮御滞在中の神徳を仰ぎ勧請したもので、元亀、天正の頃には既に社殿が建立されてあったことは口碑および地名によって証せられる。弥高山寶泉寺住職が社僧として祭事を司り岩山権現宮と称していた。延宝五年十二月の水谷検地帳にも、また、花房検地にも除地としてある。明治四年村社列格、岩山神社と改称した。