貞観元年（859）行教上人が男山八幡宮を創建するため宇佐に向かう途中この地に漂流、社殿を建立して神仏合体となる。明治の廃仏毀釈で分離し、現在地に移転。

　寺には寛政年間（1789〜1801）の納経帳が残る、九州からの遍路で当時は３ヶ月かけて88ヶ所を巡っていたとのこと。