Die frühesten Aufzeichnungen über das Schloss von San Felice stammen aus dem Jahr 1330, als die Familie Scaligeri im Rahmen der zahlreichen Kriege zwischen Guelfen und Ghibellinen die Herrschaft über Brescia anstrebte. Anfang 1521 sorgte San Felice auf Kosten der Gemeinde für den Wiederaufbau der Burg, von der nur noch der Eckturm erhalten ist, der Haupteingangsturm wurde im 18. Jahrhundert in den friedlichen Sitz des Glockenkonzerts umgewandelt, die beiden anderen Seitentürme stürzten ein und wurden zerstört, das einzige erhaltene Gebäude ist die kleine Kirche. Die Burgruine beherbergt heute den alten Friedhof und der einzige erhaltene Turm der Festung wurde als Beinhaus genutzt.