Alfred var næstældste søn af dronning Victoria. Han var uddannet som søofficer og valgtes i 1862 til konge af Grækenland, men afslog tilbuddet.