Nyílt titok volt Hollywoodban a hűtlensége: évekig csalta a feleségét a filmcsillag, szeretőjét pedig az abortuszra is rábeszélte

Pályája elején akadt néhány viharos románca partnernőivel, 1933-ban azonban feleségül vette a New York-i társaság egy közismert személyiségét, Veronica Balfe színésznőt s a frigy Hollywood egyik legtartósabb házasságának bizonyult – a színfalak mögött azonban Cooper továbbra sem tudott nemet mondani a kalandokra.