Non tout est possible, dans mon ancienne fac ils viennent de creer une annee de licence LOTUS pour justement permettre à tous d´ensuite faire des etudes scientifiques:
http://www.univ-jfc.fr/f_st/fichiers/Dossier_lotusI.pdf
Donc tu peux faire ça en venant de ES, puis apres integrer une 1ere annee de physique, mais ça va etre dur et tu vas perdre un an. Par contre je sais pas si des facs le font dans le nord de la france ou en belgique.