淺野家族作為新的藩主來到了赤穗。由於淺野家族與德川家族關係密切，他們被允許建造一座新的城堡。當時，這片地區就像面朝瀬戸內海的中洲，本丸內只有一座池田家族留下的小宅邸。在此之上，淺野家族進行了填海造地，拓展了本丸和二之丸。1661年赤穗城竣工。第一代的城主·淺野長直，是忠臣蔵事件的淺野內匠頭的祖父。據說，淺野長直的人品出眾，雇傭了許多家臣。三之丸內居住著大石家族和其他重臣，二之丸居住著娶了長直女兒的大石內藏助的叔祖父。本丸除了城主以外，還是重臣們辦公的地方。