Bu noktadan sonra La Toya ailesi ile tüm ilişkisini kaybetti ve Jack Gordon onu fiziksel istismardan dolayı babasını suçladığı bir otobiyografi yazmaya zorladı. "La Toya: Growing Up in the Jackson Family".
La Toya'nın pasaportuna el koyması dışında, banka hesaplarını kendi adına transfer etti. Ve yıllar boyunca La Toya'yı hilelerle, yalanlarla ve ev içi şiddetle kontrol etmeye devam etti. Babası Joseph Jackson, kitabı The Jacksons'da Jack Gordon'ın La Toya'nın beynini yıkadığına ve kendi ailesinden korkmasını sağladığına inandığını yazdı. Ayrıca annesi Katherine'da kızının beynini yıkadığına ve kızını öldürmeye çalıştığına inandığını belirtti. Janet'ta "Bence bu adam onun onun beynini yıkadı ve bu hale getirdi. Onu ailemizden uzak tuttu, ve şimdi beyni o kadar yıkanmış ki kendisi bizden uzak duruyor." sözleriyle buna katıldı.
La Toya: "O iyi bir adam değildi. Onun tarafından beynim yıkandı, gerçekten bir robot gibi hissediyordum, dayak yiyordum, kariyer seçimlerimi belirliyordu, Playboy'a soyunmak, kitap yazmak... Röportajlarımda söylemek istemediğim şeyleri söyletti. Mafya ile çok güçlü bağı ve bağlantısı vardı. "