Otorgar permisos de directorio a usuario especifico de otro grupo

[kivpson]

Saludos a todos y gracias por tomarse el tiempo para leer sobre mi problema, el asunto es que tengo un server ubuntu, y pues una carpeta en la que se ejecutan cierto programas, y necesito otorgar el acceso ssh a otro usuario sin que tenga la posibilidad de acceder a este directorio, he probado con la creación de grupos y usuarios, pero ubuntu solo me permite asignar permisos al grupo propietario y no al resto, o en su defecto a todo el resto de usuarios, pero si quito los permisos al resto el usuario http no podrá ejecutar los archivos del directorio, y pues me doy vueltas con eso y no llego a la solución.

Seguro existe una manera sencilla sin tener que hacer que el usuario http sea parte de root...

Le vuelvo a agradecer por su ayuda.