In 1391 kwam de boerderij, die inmiddels tot een burcht verbouwd was, in het bezit van de familie Rožmitál. Zij veranderden het uiterlijk van de vesting zodanig dat er een langgerekt gotisch paleis, een ingangstoren en een kapel ontstonden. De architect Benedikt Rejt (bekend van onder andere de Barbarakathedraal te Kutná Hora en de Vladislavzaal in de burcht van Praag) werd in de zestiende eeuw aangesteld om het gebouw te versterken en om er een nieuwe renaissancevleugel aan vast te bouwen. In het zogenaamde oude paleis treft u schitterende wandschilderingen met taferelen uit het Oude en Nieuwe Testament en van de Tuin der Liefde aan.