Nyílt titok volt Hollywoodban a hűtlensége: évekig csalta a feleségét a filmcsillag, szeretőjét pedig az abortuszra is rábeszélte

A forrás című filmdráma forgatása után élete is drámai fordulatot vett, hiszen gyengéd viszonyt kezdett ápolni filmbeli hölgypartnerével, Patricia Neallel. Eleinte rejteni próbálták kapcsolatukat, de az minden próbálkozásuk ellenére már nyílt titok volt Hollywoodban. Cooper felesége is hamar rájött erre, és amikor férjét szembesítette a pletykákkal, bevallotta, hogy azok nem alaptalan rágalmak.