Edita el overall_header.html de tu estilo predeterminado y entre las etiquetas <head> </head> añade:
<link rel="shortcut icon" href="favicon.ico">
Tiene que ser extensión .ico y el tamaño 16x16 px.
Si tienes alguna imágen y la quieres poner de favicon, subela a esta web y te lo convierten en .ico
http://www.genfavicon.com/es/
Salu2.