往昔、吉備中山に大吉備津彦命鎮座後、十握剣を宝物として彼の杜に納めた。寛喜年中（１２２９～３２）に彼の社が回禄の際、御剣を此の地に遷して奉斎した。御剣は彼の社に奉遷後、御剣の縁に依って天照大御神・須佐之男命を跡地に祭った。後、天照大御神を祀り下社とした。寛永年間（１６２４～４４）に八幡神・春日神を勧請して八幡神社と改号した。慶長の頃（１６００年前後）再興し、元禄１５年（１７０３）にも再興し現在に至っている。