대규모 언어 모델은 어떻게 작동할까요?

스토리보드
0:001:22
0:00
0:30
1:00
장면
1. 제목
2. 스케치
3. 인용구
4. 키워드
5. 스케치
6. 인용구
7. 인용구
자막
간단한 그림을 떠올리면서 대규모 언어 모델을 하나씩 풀어 ...
언어 모델은 다음에 올 단어를 계속해서 예측하는 시스템이라...
먼저 모델은 어마어마한 양의 글을 읽어요.
이렇게 학습하면서 단어들이 보통 어떻게
어울려 쓰이는지 같은 패턴을 알아차리게 됩니다.
패턴을 아주 잘 기억하는 거대한 자동 완성 기능을 떠올려 ...
사전에서 답을 찾는 게 아니라,
다음에 무엇이 올지 어림하는 거예요.
모델 안에는 단어를 숫자로 바꾸는 수학 계산이 여러 층으로...
이 숫자 덕분에 모델은 개념을 서로 비교하고,
관련된 의미끼리 이어 줄 수 있어요.
프롬프트를 입력하면 모델은 그 앞뒤의 맥락을 살펴요.
그런 다음 이어질 만한 단어 후보 여러 개에 점수를 매기고...
그중 하나를 골라요.
답변이 완성됐다고 느껴질 때까지 이 과정을 토큰 하나씩 되...
그러니까 답변은 어딘가에서 꺼내 오는 게 아니라,
한 단어씩 새로 만들어지는 거예요.
핵심은 간단해요.
언어 모델은 패턴을 배우고, 맥락을 활용해서,
다음에 올 텍스트 조각을 예측해요.
그래서 놀라울 만큼 사람처럼 말할 수 있는 거죠.
비주얼
영상
스케치 장면
영상
영상
스케치 장면
이미지
영상
오디오
TTS
TTS
TTS
TTS
TTS
TTS
TTS
배경음악
Background Music 1