Le château existait déjà en 1222, il était alors appelé petite forteresse Fortalicia. La terre de Savennes appartenait à l’origine à la maison de La Tour d’Auvergne. Bertrand de La Tour, seigneur de La Tour la possédait en 1222-1226. Bernard son fils, en était seigneur en 1270.

Bertrand de La Tour, chanoine de la cathédrale de Clermont le fut en 1276. Bertrand de La Tour (un autre), seigneur de Savennes, mort en 1286 transmit ce fief à son fils Guillaume. Mais ce dernier avait une sœur, Dauphine, à laquelle son père avait une rente de 30 livres. Sur la terre de Savennes, cette dame avait épousé Guigues alias Aymeric de la Roche, gentilhomme du diocèse du Puy.

En 1298 son frère lui abandonna le château de Savennes et en l’année 1330, elle rendit foi hommage à l’évêque de Clermont.

En 1368, Guillaume Roger, comte de Beaufort, seigneur d’Herment, de Saint Exupéry, de Pont du Château, frère du Pape Clément VI, rendit foi hommage à l’évêque de Clermont pour le château (castrum) de Savennes. Sa petite fille, Marguerite, dame de Tauves, Granges, Savennes, épousa en 1423 Bertrand de La Tour, seigneur de Murat le Quaire, Le Mont Dore, Olliergues etc. Bertrand mourut en 1450.

Son fils Agne IV de La Tour, vicomte de Turennes, seigneur de Savennes, épousa en 1455 Anne de Roger Beaufort. Il décéda en 1489 et fut enterré à Brive. Son fils Antoine, dit Raymond, épousa en 1517 Marie de la Fayette.

En 1586, Savennes passa à la famille de la Forest Bulhon, lors d’un contract de mariage du 16 septembre 1586 établi entre Jeanne Le Loup, fille de Blain, seigneur de Préchonnet, et Bertrand de la Forest Bulhon, écuyer dont la famille porte des armoiries visibles aujourd’hui encore au rez de chaussée du château.

Ces époux laissèrent un enfant, Gaspard, seigneur de Savennes marié une première fois à Dianne de Vichy le 5 février 1618 et une seconde fois le février 1634 à Anne le Groing de la Poivrière.

Du second lit, deux enfants sont nés : Charles et Guillaume, écuyer, seigneur de Savennes, maintenu dans sa noblesse en 1666. Il s’était marié le 28 novembre 1638 à Philiberte de Cornouillère.

Leur fils, Guillaume, chevalier, rendit foi hommage au roi en 1669, 1683 en 1693 pour la terre de Savennes.

Il eut deux fils : François, chevalier, seigneur de Savennes en 1745 et Etienne, chevalier, marié à Marguerite du Bois de Saint Julien.

Leur fils, Jean, seigneur de Savennes épousa le 1^er juin 1765 Françoise Blanchet. De cette union est né François, officier d’infanterie, marié le 9 décembre 1790 à Marie Claudine de Chamflour, dont une fille épousa le comte de la Roche Fontenilles. La famille de la Forest Bulhon aurait émigré en 1792 dans la région de Cologne.