Albert Scanlon est le neveu de Charlie Mitten, ancien grand joueur de Manchester United.

Le Mancunien est passé par la Manchester and Lancashire Schools avant de rejoindre les équipes de jeunes de Manchester United avec qui il a remporté 2 Youth Cup en 1953 et 1954. Il effectuera ses débuts à l’âge de 19 ans et intégrera progressivement l’équipe première, faisant parler de sa vitesse et ses qualités techniques ballon au pied. Le 5 février 1958, il était titulaire lors du match retour de Coupe d’Europe face au Red Star Belgrade (3-3). Le lendemain, le terrible drame du crash de Munich eut lieu et Scanlon, présent dans l’avion, faisait partie des rares survivants. Souffrant d’une blessure à la jambe, il ne jouera plus de la saison et effectuera son grand retour le 23 août 1958 lors d’une victoire 5-2 face à Chelsea.

Lors de cette saison 58-59, Scanlon était devenu un titulaire indiscutable et se montrait très performant avec ses 16 buts en 42 matchs de championnat. Cependant, il perd petit à petit sa place, notamment avec le grand retour en forme de Bobby Charlton. C’est ainsi qu’en novembre 1960, il est transféré à Newcastle United pour 18 000£ où il retrouve son parrain Charlie Mitten.