El Hijo de Nanette (née Gamse) y el propietario de los grandes almacenes Milwaukee, C. Ellis Goldstein. Goldstein dijo que comenzó a ver partidos de la NBA cuando tenía 10 años. A la edad de 15 años fue contratado para mantener estadísticas de juego por los Milwaukee Hawks. «Una vez que hice eso y me senté en la cancha para los juegos, estaba totalmente enganchado», dijo. «Toda mi vida ha estado dedicada al baloncesto profesional desde entonces. Tengo una gran pasión por el juego. Creo que hay más atletismo en el baloncesto que en cualquier otro deporte., Goldstein se graduó de Nicolet High School en Milwaukee, Wisconsin, donde jugó en el equipo de baloncesto. Luego asistió a la Universidad de Stanford y ha permanecido en California desde entonces.
Después de haber asistido a más de 2.000 partidos, Goldstein se hizo amigo de varios jugadores actuales y ex jugadores de la NBA, incluyendo Wilt Chamberlain, Clyde Drexler, Hakeem Olajuwon, Shaquille O’Neal, Sam Cassell y Dennis Rodman. Afirma no tener ningún equipo favorito, a pesar de sus boletos de temporada para los Lakers y los Clippers. Se describe a sí mismo como un fan de la NBA en general.,
Goldstein se niega a revelar cómo hizo su fortuna o su patrimonio neto. El Wall Street Journal especuló que Goldstein hizo miles de millones en bienes raíces (notablemente Century City en Los Ángeles). Cuando se le pregunta, normalmente responde: «digamos que tuve algunas inversiones que funcionaron bastante bien.»»Trato de no pensar en el costo», dijo. «Vale la pena para mí.»
Se informó por The Hollywood Reporter en 2020 que Goldstein hizo su dinero en parques de casas móviles, al » empaquetar grupos de propiedades en vehículos de inversión y luego demandar a los municipios…,si frustran sus intentos de acabar con el control de alquileres. Carson, el abogado de la ciudad de California Sunny Soltani se refirió a sus tácticas como «litigio terrorista», lo acusó de construir su fortuna «sobre las espaldas de las personas más vulnerables de la sociedad», y se estima que las ciudades han gastado millones para luchar contra él.
nunca se ha casado, ni ha tenido hijos. Ha declarado que no cree en el matrimonio.