LeanX
토큰
AI가 텍스트를 처리할 때 사용하는 최소 단위입니다. 글을 나누는 방식은 모델마다 달라 같은 문장도 토큰 수가 다르며, 영어는 대략 3~4글자가 1토큰입니다. API 사용 비용은 토큰 수로 계산됩니다.
쉽게 말하면
게임에서 코인을 쓰는 것처럼, AI도 글을 읽고 쓸 때마다 토큰이라는 코인을 씁니다. 긴 글을 쓰면 코인이 더 많이 필요해요!
예시
영어 "Hello World"는 보통 2토큰 안팎, 한국어 문장은 모델에 따라 토큰 수가 크게 달라짐 → API 비용은 입력·출력 토큰 수로 청구되고 토큰당 단가도 모델마다 다르므로 제공사 가격표에서 확인
함께 보면 좋은 용어
컨텍스트 윈도우, 비용 최적화, 대규모 언어 모델
더 배우기
관련 AX 가이드 강의 보기
다음 단계
이 개념을 우리 팀 업무에 어떻게 적용할지 고민된다면 아래에서 시작할 수 있습니다.