He de decir que utilizo a menudo esta expresión pero cada día dudo más de ella.
A nadie le amarga un dulce

En mi caso diré que para poder disfrutarlos hay que privarse porque si no controlamos nuestros caprichos lo verdaderamente dulce
pierde el sentido.

Prefiero perder el sentido con lo verdaderamente dulce. ;)