Robert Gortat jest starszym bratem Marcina, koszykarza klubu NBA Orlando Magic. Ich ojciec - Janusz, to dwukrotny brązowy medalista olimpijski w boksie (1972 i 1976).