まっすぐ伸びた杉の木立を抜け、長い参道を進んだ先に社殿が現れます。地域では鎮座地の名から「白木さん」と呼ばれ、親しまれてきました。祀られているのは神宮の御園（みその）を守る神で、宮川を下ってきた倭姫命が御園を奉られてこの社を定めたと伝えられます。応仁の頃から造り替えが絶え、社地すら分からなくなった時期があり、江戸時代に探し直して1694年に今の場所へ移りました。