Хаузер родился в Санта-Барбаре, штат Калифорния, сын Кэсс Уорнер, основавшей компанию кинопроизводства "Warner Sisters", и актёра Уингза Хаузера. Его дедом по отцовской линии был сценарист Дуайт Хаузер, обладатель премии "Оскар". Прадедом Хаузера по материнской линии был Гарри Уорнер, известный магнат киноиндустрии, сооснователь студии "Warner bros.", а его дедушка по материнской линии был Мильтон Сперлинг, голливудский сценарист и независимый продюсер. Бабушка по материнской линии Хаузера — Бетти Мэй Уорнер — живописец, скульптор, политический активист и владелец галереи, жена Стэнли Схайнбаума, политического активиста, экономиста, филантропа и бывшего комиссара полиции. Хаузер имеет ирландские и немецкие корни со стороны отца и еврейские по матери.