Le château et ses dépendances ont été bâtis dans le premier quart du 19e siècle pour la famille Jobez, famille de maîtres de forges et négociants en horlogerie, à plusieurs reprises à la tête de la ville de Morez : Claude-Etienne (1745-1830), maire du 1er décembre 1791 au 14 décembre 1794 puis en 1796, et son fils Jean-Emmanuel (1775-1828), maire du 29 janvier 1808 au 24 février 1825 et député à partir de 1815. Il est l'oeuvre de l'architecte bisontin Denis-Philibert Lapret, auteur en 1815-1816 pour la société Claude Jobez et Cie d'une demeure patronale (l'" ancien château ") aux forges de Syam et choisi par Emmanuel en 1817 pour construire la nouvelle église paroissiale de Morez (voir ces dossiers). En août 1819 commence la taille des pierres destinées aux colonnes du porche, initialement prévues en bois (dans une lettre adressée à Lapret, Emmanuel mentionne " le pérystile de ma petite maison des Essards "). Le bâtiment est agrandi par deux corps en retour avant la fin du 19e siècle (en 1881 suivant la matrice cadastrale) et une conciergerie édifiée à une date non déterminée en remplacement d'un rucher.