Das Problem hat sich erledigt, es lag an einigen verbuggten NPCs, die in der Roxey-Herberge herumstanden (waren aus Oblivon Alive), nachdem ich sie per Konsole getötet und disabled habe war das Problem vorerst verschwunden.
Sicherheitshalber habe ich den Datenmüll, der nun in meinem Save war noch mit Wrye Bash entfernt und Oblivion läuft wieder flüssig.