맞아요. 여기서의 not so fast는 과속하지 말라는 의미의 don't go so fast와 같은 표현입니다.
비슷한 문장들에서도 이런 식으로 생략해서 사용 가능합니다.
예: Pedal the bike. (Go) a little faster. (페달을 좀 더 밟아서 속도 좀 내라.)
예: Mix the eggs and flour until it's well combined. (Mix) gently. (계란과 밀가루를 잘 섞일 때까지 섞어. 부드럽게.)