Le site a été choisi pour le contrôle qu’il offre : il commande le passage entre la Riviera vaudoise et la vallée du Rhône, la route rapide vers l’Italie, et regarde par-delà l’eau la côte savoyarde, si bien qu’une garnison pouvait y tenir la route et y prélever un péage. Le nom viendrait d’un mot waldensien désignant une pierre plate ou une plateforme ; sous la forme Castrum Quilonis, il est attesté depuis 1195. Aujourd’hui, le canton de Vaud est propriétaire du château, que la Suisse classe comme bien culturel d’importance nationale.

La partie la plus ancienne est un donjon carré du XIe siècle, élevé pour contrôler la route qui allait de la Bourgogne vers le col du Grand-Saint-Bernard. En 1150, une charte montre le château aux mains de la maison de Savoie, et dès le milieu de ce siècle les comtes de Savoie l’ont utilisé comme résidence d’été, y gardant une flotte de bateaux sur le lac. Le comte Pierre II l’a considérablement agrandi en 1248 et en 1266-7, et ses fenêtres caractéristiques ont été ajoutées à cette époque par maître Jacques de Saint-Georges.

Les souverains de Savoie y enfermaient aussi des prisonniers. Le plus connu fut François de Bonivard, moine et historien genevois, prieur de Saint-Victor à Genève, qui y fut enfermé pendant six ans à partir de 1530, jusqu’à ce qu’une armée bernoise prenne le château en 1536 et libère tous les prisonniers. Chillon devint ensuite le siège du bailli bernois jusqu’en 1798, année où Vaud chassa les autorités bernoises ; durant l’occupation française qui suivit, il servit de dépôt de munitions et d’armes.

À la fin du XIXe siècle, le château a été restauré dans l’un des premiers projets de reconstruction fidèle d’un monument à l’aide de l’archéologie et de l’histoire, mené par l’Association pour la restauration de Chillon, fondée en 1887. Ces travaux ont été cités en exemple, et l’empereur allemand Guillaume II s’en est enquis lorsqu’il planifiait la reconstruction du Haut-Kœnigsbourg. La visite conduit à travers trois cours, quatre grandes salles et plusieurs chambres, parmi lesquelles la Camera domini, utilisée par le duc de Savoie et ornée de peintures murales du XIVe siècle, ainsi que des intérieurs recréés tels que la grande chambre, la salle et les caves de stockage. Le château propose aussi des expositions, des ateliers et des événements tout au long de l’année.

À partir de la fin du XVIIIe siècle, Chillon a attiré des écrivains, dont Lord Byron, Victor Hugo, Mary Shelley, Jean-Jacques Rousseau, Gustave Flaubert et Alexandre Dumas. L’histoire de Bonivard a inspiré à Byron, après une visite, son poème de 1816 Le Prisonnier de Chillon, et le poète aurait gravé son nom sur un pilier du cachot. Eugène Delacroix a peint le prisonnier du poème, Gustave Courbet a peint plusieurs fois le château pendant son exil tout près d’ici, et Henry James y a envoyé son héroïne dans Daisy Miller.