Hola
Primero te comento que es más eficiente que incluyas esta línea en tu php:
Código:
ini_set("memory_limit","16M");
Con las dimensiones de memoria que necesites.
Por otro lado, un script que necesita más de 100 megas de memoria para funcionar es muy probable que tenga un fallo de programación. Algún tipo de proceso no cerrado, un bucle mal planteado, o un cálculo demasiado grande sin limitaciones.
Revisa el código, localiza quien es el que genera ese gasto y luego pásate por el subforo de php consultando esa parte.
Obviamente cabe la posibilidad de que no hayas hecho nada mal y el script realmente necesite esa cantidad de memoria, pero suena poco común.
Felicidad