La familia Whitaker se dedicaba a la producción de vino y la hipótesis que se plantea es que los colores rosa y negro (color del pantalón del Palermo) son un homenaje a los vinos rosados y tintos que fabricaban. El motivo de esta dicotomía era que en aquella época, el Palermo solía alternar victorias y derrotas con mucha frecuencia. Otra teoría apuntaba al primer consejero y uno de los fundadores del club, Joseph Whitaker (que era hijo de ingleses).