Dia juga kehilangan dukungan dari orang-orang di dalam UMNO yang sangat kritis terhadap kepemimpinannya.
Pada 22 November 1970, dia mengundurkan diri dari posisi Perdana Menteri dan kemudian dari UMNO pada tahun berikutnya.
Abdul Rahman diyakini memiliki setidaknya empat istri, tapi hanya tiga pernikahan yang terkonfirmasi.
Istri pertamanya adalah seorang perempuan China bernaama Meriam Ching. Setelah kematian sang istri, dia menikahi Violet Coulsen yang kemudian diceraikannya.
Baca juga: Biografi Tokoh Dunia: Charles Pretty Boy Floyd, Gangster Paling Dicari FBI
Lalu dia menikah dengan Sharifah Rodziah Ayed Alwi Barakbah. Sementara, pernikahan keempatnya dengan Bibi Cong dirahasiakan.
Pada 1977, menjadi kepala surat kabar The Star, yang selanjutnya dilarang pada 1987 ileh Perdana Menteri Mahathir Mohamad karena mengkritik keras pemerintahan.
Selama sisa hidupnya, dia aktif menentang Mahathir meski kondisi kesehatannya membutuk.
Dia meninggal dunia pada 6 Desember 1990, pada usia 1990. Jenazahnya dimakamkan di Langgar Royal Mausoleum.
Simak breaking news dan berita pilihan kami langsung di ponselmu. Pilih saluran andalanmu akses berita Kompas.com WhatsApp Channel : https://www.whatsapp.com/channel/0029VaFPbedBPzjZrk13HO3D. Pastikan kamu sudah install aplikasi WhatsApp ya.