Fatih William onu 11. yüzyılda nehri ve Londra'nın batı yaklaşımlarını koruyan bir höyük ve avlu (motte-and-bailey) kalesi olarak kurdu; hükümdarlar kaleyi I. Henry'nin saltanatından beri kullanıyor. 13 akrlık alanı bir kaleyi, bir sarayı ve küçük bir kasabayı bir araya getiriyor; ziyaretçilerin bugün gördüklerinin büyük kısmı Orta Çağ yapılarının Georgian ve Viktorya dönemlerinde yeniden ele alınmış hâli. Kale hâlâ kullanılan bir kraliyet konutu ve yıl boyunca ziyaretçilere açık.

Yerleşim, merkezî bir höyüğün çevresindeki üç avluyu izliyor. 15 metrelik höyüğün tepesinde, Jeffry Wyatville'in 19. yüzyılın başında kaleye daha görkemli bir siluet kazandırmak için yaklaşık dokuz metre yükselttiği 12. yüzyıldan kalma burç Round Tower (Yuvarlak Kule) duruyor. Doğuda Yukarı Avlu, kuzey tarafı boyunca Devlet Daireleri'nin, 1679'da dökülmüş tunç bir atlı II. Charles heykelinin ve Thames'e bakan Kuzey Terası'nın bulunduğu dörtgen bir avlu.

Devlet Daireleri ziyaretçileri, çoğunu Wyatville'in IV. George için tasarladığı Klasik, Gotik ve Rokoko üsluptaki salonlarda dolaştırıyor. II. Charles döneminden üç Barok salon ayakta kalmış: Kralın Yemek Salonu ile Kraliçe'nin Huzur ve Kabul Salonları; tavan resimleri Antonio Verrio'ya, oymaları Grinling Gibbons'a ait. 20 Kasım 1992'de çıkan bir yangın dokuz ana salonu yok etti, 100'den fazlasına da zarar verdi; 1997'de tamamlanan restorasyon, St George's Hall'u Jartiyer Şövalyeleri'nin armalarıyla boyanmış, yeşil meşeden yeni bir çekiç kirişli çatının altında yeniden inşa etti. Edwin Lutyens'in tasarladığı ve 1930'ların önde gelen zanaatkârlarının döşediği ünlü bir oyuncak bebek evi de Kraliçe Mary için burada yapıldı; 14. yüzyıldan kalma tonozlu alt katta ise bugün bir kafe var.

Round Tower'ın aşağısındaki Aşağı Avlu'ya, Jartiyer Nişanı'nın manevi merkezi olan ve yıllık törenini düzenlediği, 15. yüzyıl sonu ile 16. yüzyıl başına ait Dikey Gotik üslubundaki St George Şapeli hâkim. Oymalı koro sıralarında altı yüzyıllık Jartiyer şövalyelerinin armalarını taşıyan pirinç levhalar var; şapelde on kral gömülü, sunağın önündeki mezar odasında VIII. Henry, Jane Seymour ve I. Charles yatıyor. Arkasındaki Albert Anma Şapeli, Prens Albert'in anısına mermer, mozaik ve tunçla süslendi ve 1246 tarihli özgün demir işlemeli kapısını koruyor.

Surların ötesinde, ağaçlı bir yol olan Long Walk kalenin güneyinde 4,26 kilometre boyunca dümdüz Windsor Great Park'a uzanıyor; Eton College ise nehrin karşısında yaklaşık yarım mil uzaklıkta. Alan dik bir tepede yer alıyor, yürüme mesafeleri uzun ve ziyaretin büyük kısmı açık havada geçiyor.