Vayamos por partes, que diría "Jack el destripador".
CPU
El voltaje del CPU se baja desde la BIOS y en tu caso lo ideal es hacerlo por OFFSET, poniendo un valor -XXXmV (tendrás que ir jugando con el valor de esas XXX para bajarlo todo lo posible mientras sea estable. Hacerlo todo desde BIOS es un poco pesado, al tener que estar encendiendo y apagando todo el rato. MSI tiene algún programa para poder tocar el OC del CPU por software, no es lo recomendable para dejar puesto un OC (mejor desde BIOS) pero si para tantear un Undervolt (si tienes la opción, también por OFFSET). De modo que abres un test stress (el que quieras) para que ponga el CPU al 100% y con el software de MSI vas tanteando con bajadas pequeñas y dejando unos minutos entre bajadas. Cuando tengas ese valor más o menos claro, ya pasas a la BIOS.
En la BIOS lo que te comentaba, en CPU SA Voltage (es el Vcore) pones en modo OFFSET y le aplicas el valor -XXXmV que hayas alcanzado como estable por software. El modo OFFSET significa que aplica suma esa cantidad (negativa) de mV al voltaje que aplica a cada estado. El modo FIXED implicaría que el Vcore fuera constante siempre, pero ya que quieres consumir menos, lo ideal es que la frecuencia y el voltaje puedan fluctuar dependiendo del uso en cada momento.
Si en idle tienes 0.850V y el offset es -150mV (ojo con las unidades 1V=1000mV) dejarías en idle 0.700V y si en carga son 1.150V dejarías 1.000V en carga (pongo esas cantidades como ejemplo). Lo normal es que puedas bajarlo entre -100mV y -200mV aproximadamente, pero empieza por -50mV y vas bajando de 15mV en cada paso por ejemplo. Si en algún momento tienes alguna congelación o se reinicia el PC, es posible que te hayas pasado con el undervolt y tocará subirlo un pelín para evitar esos problemas.
GPU
La GPU tienes que modificarle el voltaje desde Afterburner (la GPU no se modifica por la BIOS). Por defecto utiliza modo OFFSET, osea que si mueves el valor hacia la derecha le metes más voltaje, hacia la izquierda lo bajas (que es lo que nos interesa en este caso). Misma metodología, abres un test de stress para la gráfica (Kombustor, FurMark, Unigine Valley...) y vas bajando el voltaje en pequeños pasos, dejando 5 min entre pasos. Dependiendo de la gráfica los pasos pueden ir de uno en uno o a "saltitos" (en mi caso de 6 en 6), según sea el caso, vas bajando de 5 en 5 (o de 6 en 6 o lo que te permita). La primera bajada puedes hacerla algo más grande, pues de fábrica todas las gráficas vienen muy subidas de voltaje, por ejemplo bajar -20mV de primeras.
Si te pasas de undervolt es posible que empiecen a aparecer "artefactos" (cosas raras como texturas que van mal, rayas en la pantalla, cosas así), lo cuál nos indicaría que hay que subirlo un poco. Si te pasas demasiado igual tienes algún pantallazo azul o similar, reinicias, vas al Afterburner y subes el voltaje un poco para evitar esos problemas. El Power Limit no es necesario tocarlo en undervol.
Al final esto del Overclock y del Undervolt son aproximaciones por prueba y error, no tiene mucho misterio. Se pueden tocar más valores, pero ya implica profundizar mucho más en el tema.
A parte del Undervolt, te recomendaría revisar las curvas de ventiladores, tanto de la caja, de la RL como de la gráfica. Con esos componentes y esa caja deberías poder dejarlo muy fino.