LLM은 Gen AI가 아니다.
Source: Dev.to
Explanation
사람들은 종종 “LLM을 사용해서 이미지를 생성했다”, “LLM을 사용해서 내 목소리를 복제했다”, 혹은 “LLM을 사용해서 영상을 만들었다”와 같은 말을 합니다. 대부분의 경우 이는 기술적으로 정확하지 않습니다. 실제로 사용한 것은 생성 AI(Generative AI) 입니다. 혼란의 원인은 대부분의 사용자가 채팅 형태의 도구를 통해 AI와 상호작용하기 때문에, 마치 하나의 모델이 모든 일을 하는 것처럼 느껴지기 때문입니다. 실제로는 서로 다른 모델들이 매우 다른 역할을 수행합니다.
생성 AI는 텍스트, 이미지, 오디오, 비디오, 코드, 심지어 과학적 구조까지 새로운 콘텐츠를 만들 수 있는 모든 시스템을 포함하는 넓은 분야입니다. 이미지 생성기, 음성 합성 도구, 비디오 제작기, 음악 생성기 모두 생성 AI에 속합니다. 이러한 모델들은 픽셀, 음파, 움직임 패턴 등 매우 다른 종류의 데이터로 학습됩니다.
LLM(대규모 언어 모델) 은 생성 AI의 한 종류에 불과합니다. 텍스트만을 대상으로 학습됩니다. LLM의 역할은 언어를 이해하고, 언어를 생성하며, 추론하고, 요약하고, 서면 지시를 따르는 것입니다. LLM은 스스로 이미지, 소리, 비디오를 생성하지 않으며, 오직 단어와만 작업합니다.
ChatGPT와 같은 도구에서는 LLM이 언어 인터페이스 역할을 합니다. 사용자의 프롬프트를 읽고, 의도를 파악한 뒤, 다음에 무엇을 해야 할지 결정합니다. 설명을 요청하면 직접 답변을 제공합니다. 이미지나 오디오를 요청하면 실제 콘텐츠를 생성하는 전문 생성 AI 모델에 구조화된 지시를 전달합니다. 그 후 LLM은 결과물을 일반 언어로 설명해 줍니다.
따라서 “LLM을 사용해서 이미지를 생성했다”라고 말하는 것은 시스템의 잘못된 부분에 공을 돌리는 것입니다. LLM은 아이디어를 지시로 변환하는 역할을 했고, 실제 창작 작업은 생성 AI 모델이 수행한 것입니다.
이 차이를 이해하면 기대치를 더 정확히 잡을 수 있고, 도구 선택도 현명해지며, AI 시스템 설계도 더 스마트해집니다. LLM은 강력하지만 전천후 생성기가 아닙니다. LLM은 훨씬 큰 생성 AI 생태계 위에 놓인 언어 뇌에 불과합니다.