在天平2年（730），行基來到此地時，看到此風景時將刻好的千手觀音像安置在岩窯中，故起名岩屋觀音。從此以後，匯集了來往于東海道的遊客的信仰。岩屋山頂的聖觀音立像是建立在明和2年（1765）在太平洋戰爭中被供出，現在的岩屋山頂的聖觀音立像是在昭和25年（1950）從新建造的。岩屋山的南側的觀音堂的天花板上有以恩田石峰爲首的當時的吉田（豐橋的舊名）畫家們的畫。並且，岩屋觀音周圍被改建為公園，春季舉辦熱鬧的櫻花節。