人們辨識石紋，鑿開石楔，將石頭從山上分離出來。這些痕跡，清晰地鐫刻於此。

豐臣秀吉（1537年-1598年）建造的大坂城，被毀於戰火。成為勝者的德川家族，推平了豐臣家族所建的城堡，並在其旁邊建造了一座規模更大、更加宏偉的城堡。目的是向全日本宣告“豐臣時代已結束，德川時代已到來”。據說，建造這座城堡用了超過一百萬塊石頭。日本全國各地的封建領主大名，奉命參與建城堡的協助，瀨戶內地區的各地也都開了多個採石場。

這座採石場，也是在那個時代開的。從依附豐臣陣營到加入德川陣營的黑田家族，負責掌管這座採石場，並在石頭上刻下“本藩之石”的標記。事實上，在大坂城的石牆上也發現了同樣的標記，證明了大坂城的部分城牆確是用小豆島的石頭建造的。

一種說法是，石匠的工資取決於他們當天打的孔洞能裝下多少大米。據累計共有4300萬人參與採石，而搬運一塊巨石需要1000人。

然而，工程突然被叫停。最終剩下大約1600塊未經切割完的巨石。當時石匠們不得已離開這裡時，心中會是怎樣的感受呢？

此外，眼前聳立著的是“天狗岩”。這塊巨石，據說高17米，重1700噸，卻絲毫沒有被切割過的痕跡。為什麼，沒有人碰過它呢？

或許是因為，它被視為令人敬畏且超越人類理解的存在。天狗岩採石場，及其無數的孔洞，至今仍留下許多未解之謎。