para eso no es necesario ajax, puedes cambiar solo con javascript, ejemplo:
Código HTML:
<html>
<head>
<script type="text/javascript">
function chimg(esto,img)
{
esto.src=img;
}
</script>
</head>
<body>
<img src="images/1.gif" onmouseover="chimg(this,'images/2.gif')" onmouseout="chimg(this,'images/1.gif')" />
</body>
</html> lo he hecho de memoria pero creo que funcionará ;)