Validar en tiempo real

[jandrogdz]

Buenas a todos

tengo un problema al validar mis texbox en tiempo real. La forma en la que lo estoy haciendo es con expresiones regulares, si solo quiero ingresar numeros al poner alguna letra me arroja el error pero aun asi me almacena la letra y si la caja de texto esta vacia al poner el primer numero me retorna el error pero despues me permite ingresar numeros
Espero me puedan apoyar:

Código Javascript:

function validarEnteros(campo) {
    var RegExPattern = /[0-9]$/;
    var errorMessage = 'Ingresa solo números enteros.';
    if ((campo.value.match(RegExPattern)) && (campo.value=='')) {
        
    } else {
        alert(errorMessage);
        campo.focus();
    } 
}