1964: 3º en la Segunda División. 1963: 5º en la Segunda División. 3) Media de goles por encuentro. Descenso a la Liga Provincial de Fútbol del Callao. Finalmente deciden lo segundo, y tras barajar varios nombres como el «Club Deportivo Sevilla», el «Híspalis CF» o el «Deportivo Giralda», el CD Puerto pasa a cambiar su nombre y su escudo, denominándose «Sevilla Atlético Club» el 1 de agosto de 1960. También cambió su indumentaria, que consiste en una camiseta blanca con una franja diagonal en rojo y pantalón negro.
