가중치 가지치기 (Weight Pruning)
결과에 영향을 미치는 파라미터들을 제외한 나머지 파라미터들을 0 으로 설정하는 방법
양자화 (Quantization)
부동소수점으로 표현되는 파라미터들을 특정 비트 수로 줄이는 방법
이진화 (Binarization)
파라미터들을 이진화함으로써, 표현력은 줄어들지만, 정확도의 손실은 최소로하는 경량화 방법
예를 들어, -1 과 1 로만 표현