Hola SuperJavi:
Eso se hace con estilos y con onmouseover (eventos)
Será algo así:
<td onmouseover="this.style.backgroundColor='red'"
onmouseout="this.style.backgroundColor='blue'">
Puedes tambien definir más propiedades en una clase y cambiar de clase:
onmouse... "this.className='otra_clase'"
Espero que te sirva.
Saludos