Oui... Faut mettre UsePAM no dans sshd_config pour s'en débarasser (en plus du reste de la conf, évidemment), et/ou aller trifouiller /etc/pam.d/sshd (ou équivalent, ça remonte à quand j'étais sous Slackware).
Une page man complète (celle d'OpenBSD n'aborde pas PAM, évidemment) : http://www.freebsd.org/cgi/man.cgi?query=sshd_config&apropos=0&sektion=0&manpath=FreeBSD+7.2-RELEASE&format=html