El primero paso consiste en reducir los niveles del caché, para eso debes ir a Preferencias -> Rendimiento -> Niveles del caché y ahí pones un 1 como valor
El segundo paso consiste en desactivar el guardado de las vistas previas de las imágenes, para eso debes ir a Preferencias -> Manejo de archivos -> Previos de imágenes, ahí elige la opción, nunca guardar.
(Vía Make Photoshop Faster)