Hola y bienvenido mdavila, respecto a tu duda todo depende de como hayas hecho tu publish del site, porque puedes hacer hacerlo por clase o una sola por proyecto, entonces haces tu publish local para copiar las dll´s en el server para hacer reemplazarlas
Salu2 y cualquier duda por aqui andamos..