有一種說法是，在源平合戰（1180年-1185年），被射中的扇子沖到了島上，因此最初被稱為“扇島”，後來演變成在日文發音相似的“男木島”。

島嶼周長7公里。房屋依陡峭的山坡而建，層層疊疊，房屋周圍的石牆能防風防潮。
這種由石塊堆砌而成的村落，就是男木島的獨特魅力。
沿著石階而上，穿過迷宮般的狹窄小巷時，貓咪會不時從四面八方竄出，熱情地迎接著到訪的遊客。

島的北端矗立著男木島的燈塔。
它是日本為數不多的，非白色的花崗岩燈塔之一。
自明治時代建成以來，它守護了往來於此的船隻超過百年。

山中還保留著一個名為“爺爺洞”的洞穴。
在桃太郎的傳說中，據說惡鬼副將曾經逃到這裡避難，還有一個長生不老的泉水湧出。

如今的男木島，作為瀨戶內國際藝術節的舉辦地而聞名於世。
藝術品的擺設，巧妙地利用了當地狹窄傾斜的街道和閒置的房屋，將這座迷宮般的村落本身變成了一座藝術博物館。
舉辦首屆藝術節的當時，一天之內就湧入了近千名遊客，以至於有人擔心這個小島會被踩的下沉。

就這樣，小島上吹入了新的春風。
不過這裡的根基，依然還是那些在堆積的石頭、依海而居的人們的生活。

從渡輪的舷窗看到的男木島上的房屋，仿佛背靠大海緊緊依偎在一起。
傳說與歷史、加上當代藝術交織在一起的這個小島，反映了瀨戶內地區本身的多樣性。