כתוצאה מההפסד, הוא מונה על ידי הנשיא הדמוקרטי החדש ג'ון פיצג'רלד קנדי לתפקיד מזכיר החקלאות. הוא החזיק בתפקיד זה גם לאחר הירצחו של קנדי בנובמבר 1963. הוא החזיק בתפקיד זה לאורך כל כהונתו של לינדון ג'ונסון עד למינויו של הממשל הרפובליקני של ריצ'רד ניקסון ב-20 בינואר 1969. לאחר תפקיד זה הוא עסק בייעוץ ובמשפטים.