C'est dans Schaudaupark, un jardin anglais dans lequel même les Wocher Panorama est situé, et fut de 1846 à 1854 selon les plans construit par Pierre-Charles Dusillon dans un style historiciste mixte de Tudor gothique et châteaux de la Loire melded renaissance pour le banquier Alfred Abraham Denis de Rougemont en place d'une ancienne propriété de campagne.
Depuis 1925, elle appartient à la ville de Thoune, et abrite aujourd'hui un restaurant et la Cuisine suisse du Musée. Dans les années 1972 à 1992, le château a été entièrement rénové par l'équipe Steinhauer de la ville.