Theme
See Your Prompt Travel Through AI
입력한 문장이 작은 조각으로 나뉘고, 의미 위치를 찾고, 다음 말을 고르는 과정을 한 단계씩 직접 확인하는 학습 도구입니다.
Tokens 0 / 48Worker Loading
Tokenizer not-loaded / Inference not-loaded
모델 준비가 끝나면 Run Prompt 버튼이 활성화됩니다.
Tokenization
AI는 문장을 어떤 작은 조각으로 읽을까?
입력 문장이 글자와 바이트를 거쳐 AI가 쓰는 조각으로 나뉘는 과정을 보여줍니다.
아직 문장 조각이 없습니다.
여기서 만들어진 조각들이 뒤 단계에서도 같은 대상으로 이어집니다.