Si, desde luego es posible, y esta es la manera de hacerlo. En realidad es bastante simple, pero por favor tenga en cuenta que he inventado los nombres de las imagenes...
<img src="imagen_que_va_a_cambiar.jpg" name="mi_imagen">
<br>
<img src="imagen_donde_pasa_el_puntero.jpg" onMouseOver="mi_imagen.src='imagen_que_va_a_cambia r.jpg'">
Espero que le sirva... :)