Франческо Сфорца, герцог Милана, перестроил его с 1450 года на руинах замка Висконти XIV века, а сегодня в его дворах размещается группа гражданских музеев Милана и художественные собрания города.
Первый замок, Castello di Porta Giova, начал строить Галеаццо II Висконти в 1358 году, и он вырос в квадратную крепость со сторонами по 200 м и стенами толщиной до 7 метров, пока Золотая Амброзианская республика не разрушила его в 1447 году. Франческо Сфорца превратил это место в княжескую резиденцию, наняв в 1452 году скульптора и архитектора Филарете для проектирования центральной башни, до сих пор носящей его имя. При Лодовико Сфорца, с 1494 года, Леонардо да Винчи и Браманте расписывали залы внутри; около 1498 года Леонардо украсил потолок Sala delle Asse растительными мотивами. Позднее испанцы сделали замок цитаделью и с 1550 года окружили его звёздчатым укреплением из 12 бастионов, большая часть которых была снесена при Наполеоне.
Многое из того, что стоит сегодня, — дело рук Luca Beltrami, который реставрировал замок для города между 1891 и 1905 годами после того, как он перешёл от армии к Милану после объединения Италии. Torre del Filarete, взорванная в 1521 году, когда замок служил складом оружия, была отстроена в 1900–1905 годах по рисункам XVI века и посвящена королю Умберто I. Верхние части двух круглых башен со стороны города также являются современными реконструкциями. Бомбардировки союзников в 1943 году сильно повредили замок, и объединение BBPR после этого перестроило его под музей.
За главными воротами лежит большой двор, над которым возвышаются башня Боны Савойской, построенная в 1476 году во время её регентства, и Rocchetta, внутренняя цитадель со своими воротами с гербом Сфорца и двором, окружённым с трёх сторон аркадами XV века. Рядом Corte Ducale была резиденцией герцогов; её большая лоджия называется Loggiato dell'Elefante по фреске с изображением слона, написанной там. Мост-лоджия, приписываемый Браманте и заказанный Лодовико Сфорца, перекидывается на углу Torre Ducale. На стороне, когда-то обращённой к сельской местности, бывший плац стал парком Семпионе.
В гражданские музеи замка входят Пинакотека, в чьей коллекции находятся «Мадонна Тривульцио» Андреа Мантеньи и картины Тициана, Тинторетто, Vincenzo Foppa, Тьеполо и Каналетто; музей древнего искусства с оружейной палатой и залом гобеленов; музей музыкальных инструментов; доисторические находки Археологического музея Милана; и Музей старинной мебели и деревянной скульптуры. Отдельный музей отведён «Пьете Ронданини», последней скульптуре Микеланджело. Biblioteca Trivulziana, городская библиотека внутри замка, хранит Codex Trivulzianus, тетрадь с записями и набросками Леонардо да Винчи, и иллюминированный кодекс «Божественной комедии» Данте 1337 года.




