Bela și Marta Karolyi au fost acuzați de abuzuri fizice și psihologice asupra gimnastelor, în special în perioada activității lor în România și Statele Unite. Jurnalistul Fernando M. Carreno de la Marca subliniază că, deși Bela a fost un antrenor de succes, moștenirea sa umană este una problematică. Din anii 1960 până în secolul 21, cei doi au aplicat metode dure, inclusiv insulte și violență, lăsând cicatrici adânci pe trupurile și sufletele sportivelor. Critica se concentrează pe ideea că excelența în sport nu poate justifica abuzurile, iar tăcerea celor care au beneficiat de succesul lor a contribuit la perpetuarea acestor practici.
Marta și Bela Karolyi s-au retras din viața publică în urma scandalului legat de abuzurile sexuale comise de fostul medic al echipei, Larry Nassar. Cei doi antrenori, care au avut o carieră de succes în gimnastica americană, au decis să evite aparițiile publice din 2018-2019, după ce au fost acuzați că ar fi știut de abuzurile lui Nassar, fără a interveni. Nassar a fost condamnat la 175 de ani de închisoare pentru agresiuni asupra a peste 500 de sportive, iar scandalul a dus la despăgubiri legale de peste un miliard de dolari. Ancheta FBI a relevat erori grave în gestionarea acuzațiilor împotriva lui Nassar, care a continuat să consulte paciente timp de un an după ce au fost raportate abuzurile.
