Der Bau des heutigen Château de Mont geht auf die Wende vom 15. zum 16. Jahrhundert zurück. 1517 wurde es definitiv zum Familiensitz der Barone von Mont-le-Grand. Nach der bernischen Eroberung 1536 wurde der dritte Gatte von Claude de Saint-Triviers, François de Bellegarde, von den Besatzern als Gutsherr von Mont-le-Grand anerkannt. 1553 von der Familie Steiger, der letzten Gutsherrendynastie von Mont, erworben, blieb das Gut bis zur Revolution im Besitz dieser Familie.

Zu dieser Zeit wurde das Gut an den aus Frankreich stammenden Financier und Genfer Ratsherrn Joseph Bouër verkauft. Seine Gattin gewährte zahlreichen Genfern Gastrecht, als die Stadt von den Franzosen belagert wurde, und ihr Salon wurde berühmt für seine gesellschaftlichen Anlässe. 1809 ging das Schloß an den Berner Karl Jenner über und wurde später von Charles-Louis de Watteville erworben, der das Gut 1845 an Frédéric Bouffard verkaufte.

1895 veräußerte die Erbengemeinschaft Bouffard den Besitz an drei Winzer aus Mont: Henri Meylan, Henri Rosset und Henri Renaud, im Dorf die «drei Henri» genannt. Drei Jahre später erwarb Charles Mérinat aus Ollon das Schloß, der jedoch seine Darlehen nicht bezahlen konnte und es deshalb am 5. November 1911 an den Genfer Ernest Naef verkaufte. 1971 ging der Besitz der Erbengemeinschaft Ernest Naef an François Naef über, Enkel von Ernest und Sohn von Bernard.