本神社の創建は応永十年八月と伝えている。往古、大吉備津彦命が鬼ヶ嶽の賊を征伐された時、弓をひき給うたところ、その矢の羽の無いものがこの地に落ちた。この事により、羽無という。降って応永十年八月、備中国一宮吉備津宮に説通知憧大和尚が参殿、御分霊を拝戴し、現在地に社殿を造営して信仰した。