Des objets remontant à l'époque romaine ainsi que des vestiges datant de l'âge du bronze ont été découverts à Chillon lors de fouilles. La première constructions d'un donjon carré remonteraient aux alentours du Xe siècle. Le château de Chillun est mentionné dans un texte relatif à un transfert de propriété entre les évêques de Sion et les comtes de Savoie en 1150. La maison de Savoie transforme la forteresse et l'agrandit durant le XIIIe siècle. Le 28 mars 1536 le château de Chillon est pris par les Bernois épaulés par les Valaisans et une attaque nautique de 4 vaisseaux de guerre genevois. Dès 1656 le château de Chillon devient le port principal de la flotte de guerre bernoise sur le Léman. En 1793, Chillon est converti en hôpital militaire. Il devient vaudois le 11 janvier 1798, pris par des Veveysans.