Neskôr hrad vystriedal viacero majiteľov, patril napr. kráľovnej Barbore, jej dcére Alžbete či drobnej šľachte. V 17. storočí došlo k ďalším úpravám hradu, ktorý však postupne začal upadať, pretože šľachta začala uprednostňovať nižšie položené sídla, hlavne kaštieľ v Pruskom. Roku 1680 hrad vypálilo cisárske vojsko. Po rekonštrukcii však hrad vyhorel roku 1707, počas Rákociho povstania ho navyše cisárske vojská zámerne zničili výbušninami. Majitelia k ďalšej rekonštrukcii neprikročili. Dnes je zo zvyškov hradu už len zrúcanina.