Bela și Marta Karolyi au fost acuzați de abuzuri fizice și psihologice asupra gimnastelor, în special în perioada activității lor în România și Statele Unite. Jurnalistul Fernando M. Carreno de la Marca subliniază că, deși Bela a fost un antrenor de succes, moștenirea sa umană este una problematică. Din anii 1960 până în secolul 21, cei doi au aplicat metode dure, inclusiv insulte și violență, lăsând cicatrici adânci pe trupurile și sufletele sportivelor. Critica se concentrează pe ideea că excelența în sport nu poate justifica abuzurile, iar tăcerea celor care au beneficiat de succesul lor a contribuit la perpetuarea acestor practici.