五百禩神社は飫肥城下町の対岸にあって、藩主伊東家歴代を祀る神社である。もとは、伊東家の菩提寺である旧報恩寺があったが、明治５（1872）年の廃仏毀釈により廃寺となり、その跡地に同神社が建立されたものである。
　神楽殿及び拝殿は、本殿の奥側に位置する。神楽殿は桁行３間・梁間２間で周囲に縁を廻らす入母屋造である。拝殿は桁間３間で切妻造の建物である。方形の柱材を用いて板敷きの構造である。拝殿と神楽殿の間は渡殿をもって接続させている。