¿Cuál es la diferencia entre una list comprehension y una expresión generadora?

Una list comprehension construye la lista entera en memoria de inmediato; una expresión generadora devuelve un iterador perezoso que produce los elementos de uno en uno según los consumes. Los generadores usan memoria constante y pueden empezar a devolver valores antes de agotar la fuente, pero solo puedes recorrerlos una vez y no puedes indexarlos ni pedirles la longitud.

Los corchetes me dan una lista que queda materializada entera antes de que corra la siguiente línea, mientras que los paréntesis me dan un generador que calcula cada elemento bajo demanda. Para unos cientos de elementos la diferencia es ruido, así que uso una lista porque es más fácil de depurar y puedo mirarla dos veces. En cuanto la fuente es un fichero, un cursor de base de datos o un paginador de una API, me paso a un generador. En un job de conciliación en el que trabajé, cargar una exportación grande en una lista pasaba el contenedor de su límite de memoria y lo mataban una y otra vez, y cambiar un par de corchetes por paréntesis bajó el pico de memoria a unos pocos megabytes porque solo teníamos una fila en cada momento. La pega es que un generador queda agotado tras una pasada. He visto a alguien loguear el conteo de un generador y luego iterarlo, y el cuerpo del bucle no se ejecutó nunca. Si necesito los datos más de una vez, los materializo a propósito y asumo la memoria.