Rastvorova was getrouwd met de waterpoloër Boris Grisjin.
Tien maanden na de geboorte van haar zoon Jevgeni Grisjin won Rastvorova de olympische gouden medaille met het team en de olympische zilveren medaille individueel. Rastvorova werd in 1958 wereldkampioen individueel en vijfmaal met het team.