Es gibt einige Fallen (die seltsamen Riesen-Messer die von oben runterknallen), die diesen Effekt verursachen. Die Daedra die da rumlaufen lösen die Fallen schon mal selber aus, und dann wackelt der ganze Turm.

Mit einem Levelstau oder Schlafmangel hat das nichts zu tun.