Sommer begynte i ungdomssystemet til Basel i 2003. Den 10. mars 2014 signerte Sommer en femårs kontrakt med Bundesliga-klubben Borussia Mönchengladbach, gjeldende fra 1. juli. Sommers debut kom mot Homburg i DFB-Pokal, hvor Gladbach vant 3–1. I november 2019 forlenget Sommer kontrakten sin til 2023.