Seit dieser Zeit fanden keine wesentlichen baulichen Veränderungen statt. Die Burg ist bis zum heutigen Tag ununterbrochen im Besitz der Familie Khevenhüller. In einer Verfügung des Bauherrn, Georg Khevenhüller, aus dem Jahre 1576, welche auf einer Marmortafel im Burghof zu lesen ist, wird das Vermächtnis erlassen, es möge die Burg im Besitz der Nachkommen bleiben und diese mögen für deren Erhaltung Sorge tragen. Diesem Vermächtnis hat sich die Familie Khevenhüller stets verpflichtet gefühlt.