· ai
🧠✂️ Neural Network Lobotomy: LLM에서 7개의 레이어를 제거 — 30% 더 빨라짐
언어 모델에서 외과적 레이어 제거 실험: 나는 TinyLlama 1.1 B 파라미터와 22개의 디코더 레이어를 사용해 레이어를 하나씩 제거하면서 가설을 테스트했다.
언어 모델에서 외과적 레이어 제거 실험: 나는 TinyLlama 1.1 B 파라미터와 22개의 디코더 레이어를 사용해 레이어를 하나씩 제거하면서 가설을 테스트했다.