Бобби Ансер вошел в историю автоспорта не только своими победами, но и как представитель легендарной гоночной семьи США.

Отец Бобби, Джерри-старший, владел ремонтной мастерской и заправочной станцией. Один из его дядей, Луис-младший, девять раз выигрывал гонку в Пайкс-Пик. Другой дядя, Джо, хотел участвовать в «Инди-500» вместе с братьями, но погиб во время испытаний автомобиля на местной трассе.
Все три брата Бобби занимались гонками в той или иной форме. Трое сыновей Бобби, множество его племянников, а также двое внучатых племянников — Эл Ансер III и Джейсон Таннер — также занимаются различными видами автоспорта.