Primero crea la imagen que desees colocar, luego busca algun programa que te la cambie a .ico, despues de eso creo que tendras que colocar este codigo en tu pagina:
Código HTML:
<link rel="shortcut icon" href="http://aquivalaurldelaimagen/ejemplo/tuicon.ico">