Precisamente para eso se usa INSERTED y DELETED, para que no se afecte toda tu tabla.
Estas en lo cierto con UPDATED y DELETED, pero en el caso de la sentencia UPDATE tienes 2, UPDATED y DELETED (no hay un "updated"), son los nuevos datos y los ex-datos, si lo reflexionas tiene logica.