Sur PC, c'est possible d'utiliser la console pour régler le problème.
Si vous êtes sur Xbox360, vous devez désactiver le plug-in Knights of the Nine, charger votre partie et la sauvegarder à nouveau. Vous pourrez après réactiver le plug-in. Cependant, vous devrez refaire la quête des neuf chevaliers et vous perdrez tous les items ajoutés par le plug-in. De plus vous devrez retiré tous les objets que vous avez mis dans l'un des endroits ajoutés par le plug-in si vous ne voulez pas les perdre.
Autre solution: Compléter la quête pour le prince deadra Molag Bal en laissant le chevalier vous suivre et il devrait disparaître.
Pour ce qui est de la cause du bogue, il y a 2 raisons possibles:
1- Vous avez demander à l'un des chevaliers de vous suivre pendant le speech de Thedret.
2- Vous avez recruter et immédiatement demander au nouveau chevalier de vous suivre.
Il faut donc éviter ces deux situations.
J'ai trouvé sur le site de l'uesp.
http://www.uesp.net/wiki/Oblivion:Knights_of_the_Nine#Bugs
http://www.uesp.net/wiki/Oblivion:Umaril_the_Unfeathered_%28quest%29#Bugs