Pour quelqu'un qui est totalement à l'ouest concernant les différences de codec ou de lecteur je ne sais pas comment on appelle ça, qu'est ce qui caractérise un fichier mp3 d'un fichier mp4 et inversement ?

Les deux sont des fichiers musicaux ok mais au-delà de ça ?

MP3 c'est un format de compression pour la musique qui va réduire la taille du son, mais en perdant plus ou moins en qualité
MP4 c'est la version au dessus, qui permet d'avoir notamment d'avoir audio ET video dans le même conteneur.

Y'a d'autres différences très technique dans la norme ISO, mais rien de très important pour l'utilisateur