Después de su retiro como jugador activo Speaker fue durante dos años el "mánager" del equipo "Newark Bears" de la "International League", sustituyendo en esa misma posición a Walter Johnson.