Замок строился с 1553 г. для Флориана Гриспека из Гриспаха, однако не был закончен из-за смерти заказчика в 1588 г. Внешние фасады сохранились в почти нетронутом виде, как и некоторые интерьеры.
Обстановка замка происходит в основном из роудницкого замка, главной резиденции княжеского рода Лобковичей, которые владели с 1623 г. и Нелагозевесом, и из рода которых происходит нынешний владелец замка господин Мартин Лобковиц.
Среди коллекций замка выделяется картинная галерея с произведениями знаменитых европейских мастеров и одним из крупнейших собраний испанских портретов 16 и 17 вв., находящихся за пределами Испании.