Il semble que je tienne une solution. Il s'agit d'effectuer une compilation avec PdfLaTeX (touche F6 par défaut) et non avec LaTeX (F2), les images sont ainsi centrées.
En revanche, leur placement sur la page (en haut, en bas, etc.) est défini par un paramètre placé après le \begin{figure}, soit \begin{figure}[htb] (h correspond à here (ici), t pour top (en haut), b pour bottom (en bas), etc.) 