在通往赤禿山山頂的途中有一塊後醍醐天皇曾經居住的叫做“仁夫里坊”的寺院的遺跡。當時，後醍醐天皇將“仁夫里坊”重新命名為“願成寺”，從“願望”和“成真”的字面看來，大概是流浪到隱岐的後醍醐天皇寄託了“想回到京都”的情思，這個沒有確定的說法。

人們推測後來的赤禿山大火將原來的仁夫里坊，也就是願成寺燒毀，於是就遷移到這里來了。