Eigentlich musst du nur weiter auf Pius einknüppeln bis er irgendwann den Geist aufgibt. Er wird nur anfangs noch von seinem Schild geschützt, und den wegzubekommen dauert etwas (deswegen sieht es evtl. auch so aus als ob ihm die Treffer nichts ausmachen).
Schütz dich am besten selber mit dem Regenerationszauber und/oder Schild und lass dich nicht zu oft von ihm treffen - also möglichst von hinten angreifen oder wenn er gerade versucht zu zaubern (und immer schön die Verzauberung auf dem Gladius erneuern).