משלא הצליח להמשיך בצבא, וקרלה נרשם לאוניברסיטה הטכנית במינכן כדי ללמוד חקלאות. כמו חברו לכיתה היינריך הימלר, הוא הצטרף לפריקורפס אוברלנד האנטי-קומוניסטי והיה חבר מוקדם במפלגה הנאצית. הוא נכח במהלך הפוטש במרתף הבירה, כמו גם ניסיון ההתנקשות בינואר 1924 על פרנץ יוזף היינץ, ראש ממשלת הסאר שנוהל על ידי צרפת. לאחר סיום לימודיו, כשהוא בן 25, צמצם וקרלה את מעורבותו הישירה בפוליטיקה הנאצית והפך למנהל חוות בקר. הוא הצטרף מחדש למפלגה הנאצית בשנת 1925, אולם בעקבות ארגון מחדש שלה והוא השתתף בקביעות בעצרות מפלגה תוך שהוא מסייע בניסוח המדיניות החקלאית הנאצית. הוא גם נרשם לגדוד המתנדבים של האס אס שבסיסה היה בקמפטן.