行基菩薩の開基になる。弘仁６年、弘法大師が４２歳の時、厄除けの薬師如来を刻んで本尊とされた。参道の各石段下には、薬師本願経が彫りつけてある。平城、嵯峨、淳和天皇は代々勅使をだして厄除け祈願を行わせた。文治の火災で焼失したが、ご本尊は自ら近くの玉厨子山に飛び去り、伽藍が再建されたとき、後ろ向きで本堂の厨子にはいった。これが「後ろ向き薬師」のいわれ。現在、本尊が２体