Град был основан около середины 13 в. Пожар 1508 г. и последующее освобождение града из вассальной зависимости стали причиной крупной перестройки в стиле поздней готики. Примерно перед 1588 г. итальянский мастер Августин Орлик оформил его в стиле ренессанс. Значение Орлика принципиально усилилось в начале 19 в., когда в качестве своей резиденции его выбрал князь Карел Шварценберг.
После пожара в 1802 г., который замедлил работы проходившей в то время реконструкции, было выполнено увеличение всего замка на один этаж. Во время этой реконструкции замок был оформлен в романтическом стиле с элементами готики, который был позже подчеркнут при обновлении фасадов в 1860-1862 гг.
Богато обставленные Шварценбергами интерьеры замка служат исключительной демонстрацией образа жизни знати в 19 в. Украшением служит так называемый зал Тески, в котором резной кессонный потолок и панели на стенах изготовил в 1882-1884 гг. Ян Теска. В подобном романтическом духе украшен и обставлен роскошный зал Рыцарей. В замке представлен и стиль ампир, прежде всего мебелью, которую уже упомянутый Карел Шварценберг привез из Парижа.