Château médiéval certainement reconstruit en 1618. En 1748, une archive concernant la saisie de la seigneurie de Brèves précise l'état du domaine : "Premièrement le chasteau, chef-lieu et principal manoir de la terre et seigneurie de Brèves [...] consistant ledit château de Brèves en cour, avant-cour, plusieurs bâtiments appliqués an cuisines, salles, offices, fournil, écuries, bergeries, poulailler, grange, toit à porcs, chambres, antichambres, [...], le tout environné de fossez à fond de cuve et de pont-levis, colombier à pied, jardin, [...]". En 1832, Delamare écrivait: "Le beau château qui avait été bâti par ordre du célèbre François Savary, de Brèves, est maintenant en démolition". (M. Maerten et H. Mouillebouche, L'habitat fortifié en Bourgogne ducale, Base de données sur DVDrom, Centre de Castellogie de Bourgogne, 2011).