Настоящее имя Скита — Bryan Ray Trout. Брайан Рей Троут родился в Линчбурге, Вирджиния и был воспитан в Конкорде, Северная Каролина своей матерью, Каролиной Элейн Вакс [урождённая Радд], которая владеет сетью специальных маркетинговых агенств "Sports Management Group". Отец Ульриха является ресторатором, а его отчим был бывшим дайвером NASCAR и владельцем "D. K. Ulrich". Его мать с тех пор повторно вышла замуж за Эдварда Льюисса Вакса. Дядя Ульриха является спринтером дайвера NASCAR Рикки Радда [брат его матери] и его дедушкой по материнской линии был сэр Элвин Рэй Радд, президент "Al Rudd Auto Parts". Прозвище "Скит" происходит от никнейма "Скитер", которое ему дал в Младшей Лиге бейсбола его тренер из-за маленького роста. Он имел плохое здоровье, включая многочисленные приступы пневмонии и подвергся открытой опирации на сердце в 10 лет.
Ульрих окончил среднюю школу северо-западного Кабарруса, где достиг успехов в футболе. После первоначального поступления в Университет Северной Каролины в Уилмингтоне для изучения морской биологии, он переключился на Нью-Йоркский университет и впоследствии был замечен драматургом Дэвидом Мэметом.