Rosen est président et directeur-gérant des Astros de Houston d'octobre 1980 à septembre 1985. Il est engagé immédiatement après dans les mêmes fonctions par les Giants de San Francisco, où il est en poste de 1985 à 1992, présidant l'équipe lors de son titre de la Ligue nationale en 1989. En 1987, il est nommé directeur-gérant de l'année par "Sporting News", ce qui en fait le seul ancien joueur par excellence à aussi recevoir ce prix.