지식 증류

지식 증류(知識蒸溜, knowledge distillation)는 지식을 증류한다는 뜻으로 서로 다른 기계학습 모델의 지식을 전하는 기법이다.

같이 보기 
 정보 엔트로피
 교차 엔트로피

기계 학습