Pour du jeu il vaut mieux utiliser les pilotes propriétaires de ta carte graphique. Assure toi d'utiliser ceux-là. Ensuite d'autres raisons peuvent quand même expliquer une différence de performances : le portage du jeu n'est peut-être pas optimisé aux petits oignons et même les pilotes propriétaires dont j'ai parlé avant sont pas optimisés à mort (les constructeurs font un peu du service minimal), tu as aussi la possibilité d'avoir des ressources bouffées par autre chose en parallèle (sous Ubuntu et dérivées ce ne serait pas une énorme surprise).
Windows te sera sans doute utile un jour ou l'autre, si rien ne t'empêche de faire un dual boot et d'essayer à ce moment là n'hésite pas tu seras fixé.