Ramses woonde al een tijdje in een verpleeghuis, nadat hij enkele keren 's nachts op straat door criminelen was mishandeld. Ook kampte de zanger met verschijnselen van het syndroom van Korsakov, door zijn overmatige drankgebruik. Daarnaast leed de zanger aan epilepsie.
In zijn leven kreeg de zanger prestigieuze onderscheidingen: zo werd hij in 2002 geridderd in de Orde van de Nederlandse Leeuw en kreeg hij in 1967 en 2006 een Edison. In 2006 ontving hij de Edison voor zijn hele Oeuvre Prijs voor Kleinkunst. Shaffy kreeg de prijs voor zijn buitengewone verdiensten voor de Nederlandstalige muziek.
