simple...
Change le nom de tes fichiers en PHP. (index.html > index.php)
Crée un nouveau fichier, entre le codage voulu pour créer ton menu enregistre le en PHP. (par exemple menu.php)
Puis sur tes page la ou ce trouve le menu ajoute la ligne suivante:
<?php include("menu.php"); ?>
et voila, ton menu cera le meme sur tout les page et pour le modifié tu va dans le fichier "menu.php"
p.s; pas besoin de connaitre le PHP, ses juste pour validé 1 code. Le reste, fait du HTML