Матерью Ферри Порше была Алоизия Йоханна Каес. У Ферри была старшая сестра Луиза Пиех, которая была на пять лет старше его. Ферри был крещён Фердинандом Антоном Эрнстом Порше с именем Фердинанд в честь отца, именем Антон в честь деда и именем Эрнст в честь дяди по материнской линии. В раннем детстве он взял прозвище «Ферри», а не обычное прозвище «Ферди», поскольку Ферди слишком напоминал его родителям типичное прозвище кучера - профессия, которая, по совпадению, устарела из-за семейной работы. В последующие годы семья много переезжала...