神亀三年（七二六）、行基菩薩が聖武天皇の勅願を受け、この地に巡錫し一寺を建立。

その後弘仁六年（八一五）弘法大師が平城天皇と同じ四十二歳の時、天皇の勅命を受け、天皇ならびに大師自らの厄除のために本尊厄除薬師如来を謹刻し、一堂を建立、開基された。

厄坂に埋められている「薬師瑠璃光如来本願功徳経」に十二の大願が記されて、第六願と第七願に病気を治し、安楽にさせるとある。随求塔横の「随求の鐘」を備え付けの木片で歳の数だけ叩き祈願する。