在隱岐作為發配地的時候，很多上層社會的人作為政治犯被放逐到這里。可以說，知夫里這樣的孤島，能留存各種各樣的文化底蘊，也是有流放者們將本土的文化帶到了島上的因素在里面吧。

比如流放者中有一位和尚，法號“速了”，他曾為在一宮神社的小劇場舉行的村聯歡晚會進行過現場指導，而且安置在佛堂里的“大般若波羅蜜多經”，也被人們普遍認為是速了大師帶來的。

不光是這里，知夫里中多處可見的石燈籠一樣的五環塔，據說是為流放到這里的大人物們建造的墓，死後有這樣大規模的墓，看來這些人的來頭都非同小可。以前這些墓都是分佈在各處的，現在則變成了在各地區的佛堂里統一保管。