Sa vient pas de votre connection, mais du multi mal optimisé! Généralement je joue avec 3 potes, et on a remarqué que quand c´est moi qui host, sa fonctionne mieux (pourtant pas la connection la plus rapide).
Ensuite, c´est un peux galère pour mes potes de rejoindre (même problème que toi persee), mais en forçant, deco (CTRL+F12) et reco, au bou d´un moment sa passe, mais plutot pènible.
Je te conseille donc de voir si ton ami peux hoster, et enfin ressayer plusieurs fois de rejoindre.