Le château de Brežice domine la ville de la plate-forme située au-dessus de la rive gauche de la Sava. Le château fut pour la première fois cité dans les écrits en 1249. Il fut rénové après le soulèvement des paysans en 1515 et à la fin du 16ème siècle (maîtres d’œuvre de la famille Del Allio). Le plan fortifié renaissance se compose de quatre ailes qui entourent la cour intérieure. Une partie des ailes est faite d’arcades. Les angles extérieurs sont fortifiés avec des tours cylindriques aux parties inférieures inclinées. L’édifice de deux étages ferme l’axe de la voie principale de la ville qui se termine au portail principal en pierre et qui est aussi protégé par un pont enjambant le fossé.

L’intérieur du château est depuis longtemps une résidence baroque luxueuse. Une partie seulement du mobilier et des détails conservés du château datent de l’époque des Attems. La transformation baroque de la fin du 17ème, début du 18ème siècle fut parachevée par une interprétation luxueuse aux peintures illusionnistes et mythologiques comportant de nombreuses divinités antiques et des lieux idéaux, en particulier celles qui se trouvent dans la plus grande salle baroque et séculière au plafond à miroir du pays (Franciscus Karel Remb, 1699). La salle rassemble des portraits de la Métamorphose d'Ovide et autres scènes similaires. La salle ornementale avec double escalier conservé sur le côté possède des peintures conservées, baroques et séculières de la plus grande valeur que l’on trouve en Slovénie. Les escaliers à double rampe et la chapelle sont également décorés de fresques (avec respectivement, l’histoire d’Hercule et l’Elévation de la croix). L’auteur de ces peintures réalisées entre 1721 et 1727 est Franz Ignac Flurer. L’autel de la chapelle a été réalisé par l’atelier de Luka Mislej aux environs de 1718.

Depuis 1949, le château abrite un musée local présentant diverses collections (archéologie, ethnologie, soulèvements de paysans, résistance contre l'occupant, Galerie Fran Stiplovšek). Il fut agrandi en 1960 en y ajoutant continuellement des collections. Le musée est ouvert régulièrement. Dans la salle des Chevaliers sont organisés des concerts d’été.