Ce ne sera pas du HTML, puisque rien en HTML ne permet de le faire, mais du Javascript.
Tu aurais pu chercher un petit peu, car il te suffisait de regarder le code de la fenêtre d´aperçu des posts et tu aurais trouvé tout seul :
<a href="#" onClick="window.close()" alt="Fermer cette fenêtre">Fermer cette fenêtre</a>
Si tu veux un lien sous forme d´image, tu mets :
<img src="monimage.png" onClick="window.close()" alt="Fermer cette fenêtre" />