정보 병목 방법

Source: Dev.to

Overview

사진이나 음성을 떠올려 보세요. 그리고 그 사진에 누가 있는지, 혹은 어떤 단어가 말했는지만 알고 싶다고 생각해 보세요.

이 아이디어는 information(정보) 중 정말 중요한 부분만을 큰 signal(신호)을 작은 구멍, 즉 bottleneck(병목)으로 압축해 뽑아냅니다.

핵심은 다른 중요한 것에 대해 여전히 알려주는 아주 작은 code(코드)를 만들면서 나머지는 버리는 것입니다.

예측에 필요한 몇 안 되는 특징만 찾아내므로 모든 것을 보관할 필요가 없습니다.

마치 여행 짐을 꾸리는 것과 같습니다: 도움이 되는 옷만 챙기고 쓸모 없는 것은 남겨두되, 만나게 될 사람은 여전히 알 수 있도록 말이죠.

이 방법은 어떤 비트를 저장하고 어떤 비트를 버릴지 학습하며, 짧은 코드가 충분히 잘 작동할 때까지 반복합니다.

보다 똑똑한 앱을 만들거나 뇌를 연구하는 사람들에게는 의미는 유지하고 잡음은 제거하는 명확한 방법을 제공하며, 불필요한 부피 없이 압축된 유용한 신호를 얻을 수 있습니다.

Further Reading

The information bottleneck method