La première mention du château Saint-Georges date de 1033. Ses origines sont incertaines mais il passa aux mains des évêques de Côme à la fin du siècle. L'évêque de Côme Landolfo de Carcano, excommunié par le pape mais investi par l'empereur Henri IV pendant la querelle des Investitures, se réfugia au château Saint-Georges. Les troupes de la ville de Côme assiégèrent le château et capturèrent l'évêque. Cet évènement déclencha la qui dura de 1118 et 1127 entre la ville de Milan, à l'évêque était lié, et celle de Côme. La fresque de la tour, l'un des rares exemples de peinture romane profane en Suisse, date de cette époque. Le château appartint à une branche de la de Côme à partir du siècle environ.