В начале Второй мировой войны Каспар был в Австралии , где познакомился со своей будущей женой Джун. Он был женат на ней 54 года. У пары родилась дочь по имени Кристи. Каспар провел все военное время в Австралии. В 1965 году он вместе с семьей поехал в Миннеаполис , штат Миннесота, США, и работал там тренером в ледовом центре в Золотой долине в городах-побратимах (Миннеаполис и Сент-Пол ). Там он тренировал, в частности, японца Эми Ватанабэ . В 1977 году он вместе с семьей переехал в Пасадену , штат Калифорния , где продолжил работать тренером.
В 1988 году Феликс Каспар был занесен в Зал славы фигурного катания. В 1989 году он вместе с женой уехал пенсионером во Флориду; Там он умер от болезни Альцгеймера в возрасте 88 лет .