Lo que parece decir el manual es que sin LIMIT la ordenación la hace el programa (pongo 100, pero podrías aumentar si sospechas que el número es mayor).
Como te sugiere gnzsoloyo, con subconsultas, funcionará, y también con un limit que abarque lo que buscas